两级系统变更数据贯通方法、装置、存储介质及计算设备制造方法及图纸

本发明专利技术公开了一种两级系统变更数据贯通方法、装置、存储介质及计算设备，本发明专利技术根据变化业务字段的推送级别和累加变化次数，确定变更数据的权重，根据变更数据的权重，分批次贯通业务变更数据，大量变更数据同时发送时避免了通道阻塞，提高了贯通效率。提高了贯通效率。提高了贯通效率。

【技术实现步骤摘要】
两级系统变更数据贯通方法、装置、存储介质及计算设备


[0001]本专利技术涉及一种两级系统变更数据贯通方法、装置、存储介质及计算设备，属于数据传输领域。

技术介绍

[0002]大多数集团级企业通常行政结构复杂、分公司众多，信息系统往往采用分布式部署方式，即总部与分公司之间各部署一套系统，为解决总部与分公司之间系统孤立、数据分散、信息闭塞等问题，支撑总部管理层及时掌握分公司业务数据情况，通常采用数据纵向贯通技术。
[0003]目前数据贯通可采用的方式为：两级系统通过专用的消息通道进行数据上行和下行，这种方式下，同一时段的所有变更数据都会一起贯通到接收侧平台，对于变更数据范围较大、变更频繁情况下可能会导致贯通通道阻塞，影响贯通效率。

技术实现思路

[0004]本专利技术提供了一种两级系统变更数据贯通方法、装置、存储介质及计算设备，解决了
技术介绍
中披露的问题。
[0005]为了解决上述技术问题，本专利技术所采用的技术方案是：
[0006]两级系统变更数据贯通方法，包括：
[0007]通过消息通道接收业务系统侧监听到的变更数据；
[0008]根据变更数据中的变化业务字段的预设推送级别、变化业务字段累加的变化次数，计算变更数据的权重；
[0009]按权重从大到小的顺序，抽取变更数据中的业务数据，对业务数据依次进行清洗和转换，对转换成符合贯通要求的业务数据进行数据贯通；其中，业务数据为包含变化业务字段的数据。
[0010]根据变更数据中的变化业务字段的预设推送级别、变化业务字段累加的变化次数，计算变更数据的权重，包括：
[0011]根据变更数据中的变化业务字段的预设推送级别，确定变化业务字段推送级别的索引；
[0012]根据变化业务字段累加的变化次数，确定变化业务字段的累计权重；
[0013]根据变化业务字段累加的变化次数，计算变化业务字段在预设时间内的变更频率；
[0014]根据变更频率，确定变化业务字段的频率权重；
[0015]根据变化业务字段推送级别的索引、变化业务字段的累计权重、变化业务字段的频率权重，计算变更数据的权重。
[0016]计算变更数据权重的公式为：
[0017][0018]其中，β为变更数据的权重，FW为变化业务字段的频率权重，CW为变化业务字段的累计权重，PLI为变化业务字段推送级别的索引，N
PLI
为PLI的种类数。
[0019]在业务数据清洗过程中，若清洗出不符合规范的数据，按照不符合规范数据的业务字段重要性，向业务系统侧发出相应级别的告警；
[0020]在数据贯通过程中，若连续数据贯通失败次数达到阈值，针对贯通失败的数据，向业务系统侧发出告警。
[0021]两级系统变更数据贯通装置，包括：
[0022]接收模块，通过消息通道接收业务系统侧监听到的变更数据；
[0023]分级模块，根据变更数据中的变化业务字段的预设推送级别、变化业务字段累加的变化次数，计算变更数据的权重；
[0024]筛选发送模块，按权重从大到小的顺序，抽取变更数据中的业务数据，对业务数据依次进行清洗和转换，对转换成符合贯通要求的业务数据进行数据贯通；其中，业务数据为包含变化业务字段的数据。
[0025]分级模块计算变更数据权重的过程，包括：
[0026]根据变更数据中的变化业务字段的预设推送级别，确定变化业务字段推送级别的索引；
[0027]根据变化业务字段累加的变化次数，确定变化业务字段的累计权重；
[0028]根据变化业务字段累加的变化次数，计算变化业务字段在预设时间内的变更频率；
[0029]根据变更频率，确定变化业务字段的频率权重；
[0030]根据变化业务字段推送级别的索引、变化业务字段的累计权重、变化业务字段的频率权重，计算变更数据的权重。
[0031]分级模块中，计算变更数据权重的公式为：
[0032][0033]其中，β为变更数据的权重，FW为变化业务字段的频率权重，CW为变化业务字段的累计权重，PLI为变化业务字段推送级别的索引，N
PLI
为PLI的种类数。
[0034]筛选发送模块中，若清洗出不符合规范的数据，按照不符合规范数据的业务字段重要性，向业务系统侧发出相应级别的告警；
[0035]若连续数据贯通失败次数达到阈值，针对贯通失败的数据，向业务系统侧发出告警。
[0036]一种存储一个或多个程序的计算机可读存储介质，所述一个或多个程序包括指令，所述指令当由计算设备执行时，使得所述计算设备执行两级系统变更数据贯通方法。
[0037]一种计算设备，包括一个或多个处理器、一个或多个存储器以及一个或多个程序，其中一个或多个程序存储在所述一个或多个存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序包括用于执行两级系统变更数据贯通方法的指令。
[0038]本专利技术所达到的有益效果：1、本专利技术根据变化业务字段的推送级别和累加变化次数，确定变更数据的权重，根据变更数据的权重，分批次贯通业务变更数据，大量变更数据同时发送时避免了通道阻塞，提高了贯通效率；2、本专利技术采用数据库监听技术，实时采集业务数据变化，并利用消息通道推送至贯通装置，对源系统影响小、代价低、效率高；3、本专利技术对抽取的数据进行数据清洗和转换，提升了贯通数据的准确性完整性，并对不规范业务数据进行告警，提醒业务系统完善数据。
附图说明
[0039]图1为两级系统变更数据贯通方法的流程图；
[0040]图2为两级系统变更数据贯通装置的结构框图。
具体实施方式
[0041]下面结合附图对本专利技术作进一步描述。以下实施例仅用于更加清楚地说明本专利技术的技术方案，而不能以此来限制本专利技术的保护范围。
[0042]如图1所示，两级系统变更数据贯通方法，包括以下步骤：
[0043]步骤1，通过消息通道接收业务系统侧监听到的变更数据；
[0044]步骤2，根据变更数据中的变化业务字段的预设推送级别、变化业务字段累加的变化次数，计算变更数据的权重；
[0045]步骤3，按权重从大到小的顺序，抽取变更数据中的业务数据，对业务数据依次进行清洗和转换，对转换成符合贯通要求的业务数据进行数据贯通；其中，业务数据为包含变化业务字段的数据。
[0046]上述方法实施在数据贯通服务侧，通过根据变化业务字段的推送级别和累加变化次数，确定变更数据的权重，根据变更数据的权重，分批次贯通业务变更数据，大量变更数据同时发送时避免了通道阻塞，提高了贯通效率。
[0047]上述方法在业务系统侧采用数据库监听技术，实时采集业务数据变化，即对数据库变更数据进行监听，一旦接收到新的变更数据记录，对变化数据记录进行过滤和初筛，根据预先设定的规则集对变更记录进行判断，如果不满足任何条件，就丢弃掉，如果满足某一条件，将数据进行简单转换后以LCR(逻辑变化记录)形式本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.两级系统变更数据贯通方法，其特征在于，包括：通过消息通道接收业务系统侧监听到的变更数据；根据变更数据中的变化业务字段的预设推送级别、变化业务字段累加的变化次数，计算变更数据的权重；按权重从大到小的顺序，抽取变更数据中的业务数据，对业务数据依次进行清洗和转换，对转换成符合贯通要求的业务数据进行数据贯通；其中，业务数据为包含变化业务字段的数据。2.根据权利要求1所述的两级系统变更数据贯通方法，其特征在于，根据变更数据中的变化业务字段的预设推送级别、变化业务字段累加的变化次数，计算变更数据的权重，包括：根据变更数据中的变化业务字段的预设推送级别，确定变化业务字段推送级别的索引；根据变化业务字段累加的变化次数，确定变化业务字段的累计权重；根据变化业务字段累加的变化次数，计算变化业务字段在预设时间内的变更频率；根据变更频率，确定变化业务字段的频率权重；根据变化业务字段推送级别的索引、变化业务字段的累计权重、变化业务字段的频率权重，计算变更数据的权重。3.根据权利要求2所述的两级系统变更数据贯通方法，其特征在于，计算变更数据权重的公式为：其中，β为变更数据的权重，FW为变化业务字段的频率权重，CW为变化业务字段的累计权重，PLI为变化业务字段推送级别的索引，N
PLI
为PLI的种类数。4.根据权利要求1所述的两级系统变更数据贯通方法，其特征在于，在业务数据清洗过程中，若清洗出不符合规范的数据，按照不符合规范数据的业务字段重要性，向业务系统侧发出相应级别的告警；在数据贯通过程中，若连续数据贯通失败次数达到阈值，针对贯通失败的数据，向业务系统侧发出告警。5.两级系统变更数据贯通装置，其特征在于，包括：接收模块，通过消息通道接收业务系统侧监听到的变更数据；分级模块，根据变更数据中的变化业务字段的预设推送级别、变化业务字段累加的变化次数，计算变更数据的权重；筛选发...

【专利技术属性】
技术研发人员：密兴峰，刘士进，时旭，郭新波，郝鹏海，朱军，何翔，
申请(专利权)人：南京南瑞信息通信科技有限公司，
类型：发明
国别省市：