数据整合方法、装置、设备及存储介质制造方法及图纸

技术编号:20916315 阅读:20 留言:0更新日期:2019-04-20 09:39
本发明专利技术提供一种数据整合方法、装置、设备及存储介质,即获取系统的初始数据,将所述初始数据按照预设格式存储至初始数据库,并将调整配置信息存储至所述初始数据库;在接收到数据更新指令时,在所述初始数据库中获取所述数据更新指令对应的目标数据,并根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息;若存在,则通过所述初始数据库中的预设更新引擎,获取所述目标调整配置信息,通过所述目标调整配置信息更新所述目标数据,并将更新后的目标数据反馈至对应系统。本发明专利技术将多系统数据汇集至同一数据库中,实现了数据统一归集整合,实现了数据共享。

Data Integration Method, Device, Equipment and Storage Media

The invention provides a data integration method, device, device and storage medium, that is, acquiring the initial data of the system, storing the initial data in a preset format to the initial database, and storing the adjustment configuration information to the initial database. When receiving the data update instruction, the target data corresponding to the data update instruction is obtained in the initial database. According to the update rules in the data update instructions, it is judged whether there is target adjustment configuration information matching the update rules in the initial database; if there is, the target adjustment configuration information is obtained through the preset update engine in the initial database, the target adjustment configuration information is updated by the target adjustment configuration information, and the updated target is updated by the target adjustment configuration information. The data is fed back to the corresponding system. The invention collects multi-system data into the same database, realizes unified data collection and integration, and realizes data sharing.

【技术实现步骤摘要】
数据整合方法、装置、设备及存储介质
本专利技术涉及数据处理领域,尤其涉及一种数据整合方法、装置、设备及计算机可读存储介质。
技术介绍
随着互联网的发展,越来越多的业务事项需要通过平台系统进行处理。为了保证数据安全,一个企业一般具有多个不同功能的信息系统,各信息系统之间物理分离。例如,在金融领域,随着各个金融机构业务的不断发展以及IT规划的深入开展,越来越多的IT系统(比如ERPF、DW&MIS、SMIS等)相继投入使用,另外还有很多的管理信息系统已在运行中,如CMIS等等。这些系统中都存储了大量的管理信息数据,并产生各自的业务分析报表。由于各信息系统会对应管理本系统数据,因此获取其他系统数据需要开通对应的数据获取权限。另外,不同系统数据具有不同的存储模式,所以不同系统之间的数据难以共享、缺乏一致性,由此给业务分析造成了不便。因此,如何解决现有技术中不同系统之间的数据难以共享,成为了目前亟待解决的技术问题。
技术实现思路
本专利技术的主要目的在于提供一种数据整合方法、装置、设备及计算机可读存储介质,旨在解决现有技术中不同系统之间的数据难以共享的技术问题。为实现上述目的,本专利技术提供一种数据整合方法,所述数据整合方法包括以下步骤:获取系统的初始数据,将所述初始数据按照预设格式存储至初始数据库,并将用于调整所述初始数据的调整配置信息存储至所述初始数据库;在接收到数据更新指令时,在所述初始数据库中获取所述数据更新指令对应的目标数据,并根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息;若所述初始数据库中存在所述目标调整配置信息,则通过所述初始数据库中的预设更新引擎,获取所述目标调整配置信息,通过所述目标调整配置信息更新所述目标数据,并将更新后的目标数据反馈至对应系统。可选地,所述获取系统的初始数据,将所述初始数据按照预设格式存储至初始数据库,并将用于调整所述初始数据的调整配置信息存储至所述初始数据库的步骤包括:获取各系统的初始数据,根据预设安全规则,将所述初始数据进行安全等级划分,并将各个安全等级数据添加对应的安全等级标识;将所述各个安全等级数据以及对应的安全等级标识分开存储至所述初始数据库中的相应区域;将用于调整所述各个安全等级数据的调整配置信息与所述各个安全等级数据进行关联存储。可选地,所述在接收到数据更新指令时,在所述初始数据库中获取所述数据更新指令对应的目标数据,并根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息的步骤包括:在接收到数据更新指令时,在所述初始数据库中获取所述数据更新指令对应的目标数据;判断所述初始数据库中是否存在所述目标数据关联对应的调整配置信息;若所述初始数据库中不存在所述目标数据关联对应的调整配置信息,则生成并输出目标数据不可被配置的提醒消息;若所述初始数据库中存在所述目标数据关联对应的调整配置信息,则根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息。可选地,所述在接收到数据更新指令时,在所述初始数据库中获取所述数据更新指令对应的目标数据,并根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息的步骤包括:在接收到数据更新指令时,判断预设缓存列表中是否存在所述数据更新指令对应的目标数据;若所述预设缓存列表中不存在所述目标数据,则在所述初始数据库中获取所述数据更新指令对应的目标数据,并根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息。可选地,所述在接收到数据更新指令时,判断预设缓存列表中是否存在所述数据更新指令对应的目标数据的步骤之后,还包括:若所述预设缓存列表中存在所述目标数据,则将所述目标数据反馈至所述对应系统。可选地,所述在接收到数据更新指令时,在所述初始数据库中获取所述数据更新指令对应的目标数据,并根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息的步骤包括:在接收到数据更新指令时,获取所述对应系统的系统账号,并根据预设权限用户列表,判断所述对应系统是否为合法用户;若所述对应系统为非法用户,则生成并显示非法操作的提醒消息;若所述对应系统为合法用户,则在所述初始数据库中获取所述数据更新指令对应的目标数据,并根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息。可选地,所述在接收到数据更新指令时,在所述初始数据库中获取所述数据更新指令对应的目标数据,并根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息的步骤之后,还包括:若所述初始数据库中不存在与所述更新规则匹配的目标调整配置信息,则根据所述更新规则生成更新配置信息;根据所述更新配置信息更新所述目标数据,将更新后的目标数据反馈至对应系统,并将所述更新配置信息存储至所述初始数据库。此外,为实现上述目的,本专利技术还提供一种数据整合装置,所述数据整合装置包括:数据提取模块,用于获取系统的初始数据,将所述初始数据按照预设格式存储至初始数据库,并将用于调整所述初始数据的调整配置信息存储至所述初始数据库;信息判断模块,用于在接收到数据更新指令时,在所述初始数据库中获取所述数据更新指令对应的目标数据,并根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息;数据更新模块,用于若所述初始数据库中存在所述目标调整配置信息,则通过所述初始数据库中的预设更新引擎,获取所述目标调整配置信息,通过所述目标调整配置信息更新所述目标数据,并将更新后的目标数据反馈至对应系统。此外,为实现上述目的,本专利技术还提供一种数据整合设备,所述数据整合设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的数据整合程序,其中所述数据整合程序被所述处理器执行时,实现如上述的数据整合方法的步骤。此外,为实现上述目的,本专利技术还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有数据整合程序,其中所述数据整合程序被处理器执行时,实现如上述的数据整合方法的步骤。本专利技术提供一种数据整合方法,即获取系统的初始数据,将所述初始数据按照预设格式存储至初始数据库,并将用于调整所述初始数据的调整配置信息存储至所述初始数据库;在接收到数据更新指令时,在所述初始数据库中获取所述数据更新指令对应的目标数据,并根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息;若所述初始数据库中存在所述目标调整配置信息,则通过所述初始数据库中的预设更新引擎,获取所述目标调整配置信息,通过所述目标调整配置信息更新所述目标数据,并将更新后的目标数据反馈至对应系统。通过上述方式,本专利技术将多系统数据汇集至同一数据库中,实现了数据统一归集整合。摒弃基于数据源库表抓取数据的模式,释放更多资源给线上业务系统,提高系统运转效率。并通过初始数据库可对不同业务系统进行业务数据集中分析,并可通过预存配置信息进行各个业务系统数据的更新,实现数据共享,提高本文档来自技高网...

【技术保护点】
1.一种数据整合方法,其特征在于,所述数据整合方法包括以下步骤:获取系统的初始数据,将所述初始数据按照预设格式存储至初始数据库,并将用于调整所述初始数据的调整配置信息存储至所述初始数据库;在接收到数据更新指令时,在所述初始数据库中获取所述数据更新指令对应的目标数据,并根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息;若所述初始数据库中存在所述目标调整配置信息,则通过所述初始数据库中的预设更新引擎,获取所述目标调整配置信息,通过所述目标调整配置信息更新所述目标数据,并将更新后的目标数据反馈至对应系统。

【技术特征摘要】
1.一种数据整合方法,其特征在于,所述数据整合方法包括以下步骤:获取系统的初始数据,将所述初始数据按照预设格式存储至初始数据库,并将用于调整所述初始数据的调整配置信息存储至所述初始数据库;在接收到数据更新指令时,在所述初始数据库中获取所述数据更新指令对应的目标数据,并根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息;若所述初始数据库中存在所述目标调整配置信息,则通过所述初始数据库中的预设更新引擎,获取所述目标调整配置信息,通过所述目标调整配置信息更新所述目标数据,并将更新后的目标数据反馈至对应系统。2.如权利要求1所述的数据整合方法,其特征在于,所述获取系统的初始数据,将所述初始数据按照预设格式存储至初始数据库,并将用于调整所述初始数据的调整配置信息存储至所述初始数据库的步骤包括:获取系统的初始数据,根据预设安全规则,将所述初始数据进行安全等级划分,并将各个安全等级数据添加对应的安全等级标识;将所述各个安全等级数据以及对应的安全等级标识分开存储至所述初始数据库中的相应区域;将用于调整所述各个安全等级数据的调整配置信息与所述各个安全等级数据进行关联存储。3.如权利要求1所述的数据整合方法,其特征在于,所述在接收到数据更新指令时,在所述初始数据库中获取所述数据更新指令对应的目标数据,并根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息的步骤包括:在接收到数据更新指令时,在所述初始数据库中获取所述数据更新指令对应的目标数据;判断所述初始数据库中是否存在所述目标数据关联对应的调整配置信息;若所述初始数据库中不存在所述目标数据关联对应的调整配置信息,则生成并输出目标数据不可被配置的提醒消息;若所述初始数据库中存在所述目标数据关联对应的调整配置信息,则根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息。4.如权利要求1所述的数据整合方法,其特征在于,所述在接收到数据更新指令时,在所述初始数据库中获取所述数据更新指令对应的目标数据,并根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息的步骤包括:在接收到数据更新指令时,判断预设缓存列表中是否存在所述数据更新指令对应的目标数据;若所述预设缓存列表中不存在所述目标数据,则在所述初始数据库中获取所述数据更新指令对应的目标数据,并根据所述数据更新指令中的更新规则,判断所述初始数据库中是否存在与所述更新规则匹配的目标调整配置信息。5.如权利要求4所述的数据整合方法,其特征在于,所述...

【专利技术属性】
技术研发人员:陈宝荣
申请(专利权)人:深圳壹账通智能科技有限公司
类型:发明
国别省市:广东,44

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1