一种异构系统间实时数据传输方法和系统技术方案

本发明专利技术涉及数据处理技术领域，具体涉及一种异构系统间实时数据传输方法和系统，包括参数池、数据处理及传输子系统和触发子系统，数据处理及传输子系统包括数据采集组件、数据处理组件和数据输出组件，通过参数池对设置的目标系统信息、多维数据范围和配置参数进行管理；通过触发子系统控制数据采集组件采集多维数据集，并基于配置参数对多维数据集进行预处理，得到二维数据；通过触发子系统控制数据处理组件对二维数据进行后处理，得到数据源；通过触发子系统控制数据输出组件基于多维数据范围将数据源发送给目标系统，全过程不需要对原有系统侵入式的修改，解决了现有的多维数据交互的配置周期较长的问题。交互的配置周期较长的问题。交互的配置周期较长的问题。

【技术实现步骤摘要】
一种异构系统间实时数据传输方法和系统


[0001]本专利技术涉及数据处理
，尤其涉及一种异构系统间实时数据传输方法和系统。

技术介绍

[0002]在全员绩效管理系统中，经常需要将外围系统数据集成到多维数据集内部，并且也需要将多维数据集的数据传递给外围系统。特别是在填报场景下，一些风险控制系统或者BI工具等第三方系统需要实时获取用户录入数据。
[0003]传统的数据库多通过CDC和binlog等机制来获取，相对比较复杂，并且不能在传输之前对数据进行加工处理，无法实现多维数据的交互。
[0004]目前多维数据集的交互，通常情况下，多通过重新编码开发的方式完成，需要对原有系统侵入式的修改，使得整个配置的周期延长。

技术实现思路

[0005]本专利技术的目的在于提供一种异构系统间实时数据传输方法和系统，旨在解决现有的多维数据交互的配置周期较长的问题。
[0006]为实现上述目的，第一方面，本专利技术提供了一种异构系统间实时数据传输系统，包括参数池、数据处理及传输子系统和触发子系统，所述参数池、所述数据处理及本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种异构系统间实时数据传输系统，其特征在于，包括参数池、数据处理及传输子系统和触发子系统，所述参数池、所述数据处理及传输子系统和所述触发子系统依次连接；所述数据处理及传输子系统包括数据采集组件、数据处理组件和数据输出组件，所述数据采集组件、所述数据处理组件和所述数据输出组件均与所述触发子系统连接；所述参数池，用于对设置的目标系统信息、多维数据范围和配置参数进行管理；所述数据采集组件，用于采集多维数据集，并基于所述配置参数对所述多维数据集进行预处理，得到二维数据；所述数据处理组件，用于对所述二维数据进行后处理，得到数据源；所述数据输出组件，基于所述多维数据范围将所述数据源发送给目标系统；所述触发子系统，用于触发所述数据采集组件、所述数据处理组件和所述数据输出组件工作。2.如权利要求1所述的异构系统间实时数据传输系统，其特征在于，所述数据处理组件包括数据采集模块、过滤模块和拉平模块，所述数据采集模块、所述过滤模块和所述拉平模块依次连接；所述数据采集模块，用于采集多维数据集；所述过滤模块，基于所述配置参数对所述多维数据集进行过滤，得到过滤数据集；所述拉平模块，基于所述配置参数将所述过滤数据集拉平，得到二维数据。3.如权利要求2所述的异构系统间实时数据传输系统，其特征在于，所述数据处理组件包括关联合并模块、汇总模块和计算模块，所述关联合并模块、所述汇总模块和计算模块依次连接；所述关联合并模块，用于将所述二维数据关联合并，得到合并数据；所述汇总模块，用于将所有合并数据汇总，得到汇总数据；所述计算模块，用于对所述汇总数据进行计算，得到数据源。4.如权利要求3所述的异构系统间实时数据传输系统，其特征在于，所述数据输出组件包括源采集模块、目标采集模块和传输模块，所述源采集模块和...

【专利技术属性】
技术研发人员：唐君伟，郭洪圆，
申请(专利权)人：上海绎维软件系统有限公司，
类型：发明
国别省市：