【技术实现步骤摘要】
数据处理平台及数据处理方法
本专利技术实施例涉及计算机
,尤其涉及一种数据处理平台及数据处理方法。
技术介绍
目前,企业的发展越来越依赖于通过计算机和网络系统实现管理。然而,企业的高速发展使得企业内部存在很多遗留系统和遗留数据,特别是对于大公司和运营时间比较长的公司,这样的系统和数据会非常多。以包括多条业务线的企业系统为例,可能存在着诸如:1)不同业务线记录的用户信息有差别;2)不同业务线的技术架构有很大差别,导致原始数据的存储分散,等等问题。由此,导致数据的整合和梳理极端困难,无法对已有数据进行有效利用。
技术实现思路
有鉴于此,本专利技术实施例提供了一种数据处理平台及数据处理方法,以解决上述问题。根据本专利技术实施例的一个方面,提供了一种数据处理平台,包括:数据读取代理、数据处理单元和数据推理代理;其中,所述数据读取代理,用于从与所述平台对接的多个业务逻辑中读取多个用户对应的业务数据,其中,所述业务数据中携带有时间信息;所述数据处理单元,用于根据所述时间信息,对每个用户对应的业务数据进行同步;所述数据推理代理,用于获取同步后的每个用户的业务数据,使用设定的第 ...
【技术保护点】
1.一种数据处理平台,其特征在于,包括:数据读取代理、数据处理单元和数据推理代理;其中,所述数据读取代理,用于从与所述平台对接的多个业务逻辑中读取多个用户对应的业务数据,其中,所述业务数据中携带有时间信息;所述数据处理单元,用于根据所述时间信息,对每个用户对应的业务数据进行同步;所述数据推理代理,用于获取同步后的每个用户的业务数据,使用设定的第一谓词规则对获取的所述业务数据进行数据融合。
【技术特征摘要】
1.一种数据处理平台,其特征在于,包括:数据读取代理、数据处理单元和数据推理代理;其中,所述数据读取代理,用于从与所述平台对接的多个业务逻辑中读取多个用户对应的业务数据,其中,所述业务数据中携带有时间信息;所述数据处理单元,用于根据所述时间信息,对每个用户对应的业务数据进行同步;所述数据推理代理,用于获取同步后的每个用户的业务数据,使用设定的第一谓词规则对获取的所述业务数据进行数据融合。2.根据权利要求1所述的数据处理平台,其特征在于,还包括:数据分析单元,用于使用设定的第二谓词规则,对进行了数据融合后的业务数据进行分析,获取每个用户对应的用户特征数据。3.根据权利要求2所述的数据处理平台,其特征在于,所述用户特征数据包含账号特征数据;所述数据分析单元,还用于根据所述用户特征数据中的账号特征数据,确定所述多个用户中是否存在相同的用户;若存在,则将相同用户对应的用户特征数据进行合并。4.根据权利要求2或3所述的数据处理平台,其特征在于,所述用户特征数据具有不同的数据类型;所述平台还设置有多个不同类型的数据库,用于对应存储不同数据类型的用户特征数据。5.根据权利要求1-3任一项所述的数据处理平台,其特征在于,所述数据处理单元包括数据码头和数据仓库;其中,所述数据仓库,用于存储所述数据读取代理读取的所述多个用户对应的业务数据;根据所述业务数据中的时间信息,对每个用户对应的业务数据进行同步;并将同步成功的业务数据发送给所述数据码头;所述数据码头,用于存储同步成功的所述业务数据,并按照设定的调度规则,将存储的所述业务数据调度给所述数据推理代理进行处理。6.根据权利要求1-3任一项所述的数据处理平台,其特征在于,所述平台中还设置有至少一个分布式消息队列;所述数据读取代理通过至少一个所述分布式消息队列从所述多个业务逻辑中读取多个用户对应的业务数据;所述数据处理单元通过至少一个所述分布式消息队列将同步后的每...
【专利技术属性】
技术研发人员:陈旷,付国为,吕霞,
申请(专利权)人:北京新唐思创教育科技有限公司,
类型:发明
国别省市:北京,11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。