一种偏差数据源头获取方法技术

本申请公开了一种偏差数据源头获取方法

【技术实现步骤摘要】
一种偏差数据源头获取方法、装置、设备及存储介质


[0001]本申请涉及大数据领域，尤其涉及一种偏差数据源头获取方法
、
装置
、
设备及存储介质
。

技术介绍

[0002]银行中涉及大量数据，而不同数据之间具有一定的关联关系，且这种关联关系之间的复杂度较高
。
为了保证数据的安全性，各数据之间通过规则进行加工处理
。
[0003]当银行中进行新旧线数据之间的数据迁移时，会出现数据偏移的情况，即会有大量数据出现偏差，由于各数据层对数据的加工规则往往不同，使得数据源相互交错
。
在此情况下，当某条数据出现不一致的时候，需要多方人员逐层确认规则以排除自己系统或环节的责任
。
这就导致非责任方可能会在不涉及自己问题的环节上消耗大量的时间，而真正责任方的校验失误有可能让整个环节继续推翻重来，这种情况下要想得到数据偏差的源头需要花费大量时间，使得数据处理的效率低下
。

技术实现思路

[0004]有鉴于此，本申请提供了一种偏差数据源本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种偏差数据源头获取方法，其特征在于，所述方法包括：对平台中的数据进行规则简化处理，得到多个具有最小规则的数据，所述具有最小规则的数据为包括字段名称和字段来源的数据；以所述字段名称为节点
、
所述字段来源为关系边构建关联图谱；对所述关联图谱中的节点进行得分计算，将各节点的得分情况发送到中央服务器的云平台，所述云平台接收来自各个平台中的节点得分情况，并进行整理得到新的得分结果；当银行在进行数据迁移产生偏差数据时，根据所述云平台中的所述新的得分结果查找所述偏差数据的源头
。2.
根据权利要求1所述的方法，其特征在于，所述当银行在进行数据迁移产生偏差数据时，根据所述云平台中的所述新的得分结果查找所述偏差数据的源头包括：当银行在进行数据迁移产生偏差数据时，在所述云平台的所述新的得分结果中查找得分情况中分数最高的节点；根据所述得分情况中分数最高得分情况中分数最高的节点查找所述得分情况中分数最高的节点对应的平台，作为第一平台；在所述第一平台中进行偏差数据验证，若验证成功，说明所述偏差数据的源头在所述第一平台
。3.
根据权利要求1所述的方法，其特征在于，所述云平台接收来自各个平台中的节点得分情况，并进行整理得到新的得分结果包括：将各平台中的所有节点的得分情况进行重新排序，根据得分情况为各个节点设置得分权重，得到新的得分结果；将节点的得分权重与对应节点的名称写入节点权重表中
。4.
根据权利要求3所述的方法，其特征在于，根据权利要求1所述的方法，其特征在于，所述当银行在进行数据迁移产生偏差数据时，根据所述云平台中的所述新的得分结果查找所述偏差数据的源头包括：当银行在进行数据迁移产生偏差数据时，获取偏差数据占总数据的比例，根据所述比例在所述节点权重表中得到需要查找的节点权重范围，根据所述节点权重范围得到对应的节点；根据在节点权重表中查找到的节点查找对应的平台，作为第二平台；在所述第二平台中进行偏差数据验证，若验证成功，说明所述偏差数据的源头在所述第二平台
...

【专利技术属性】
技术研发人员：李牧，邝智颖，敖倩，
申请(专利权)人：中国银行股份有限公司，
类型：发明
国别省市：