数据同步方法、装置、计算机设备和存储介质制造方法及图纸

本申请涉及一种数据同步方法、装置、计算机设备和存储介质，涉及大数据技术领域，可适用于金融领域或其他技术领域。所述方法包括：在将源端的数据同步至目标端的过程中，若识别到源端与目标端之间存在数据同步延迟状况，则根据所述目标端的数据接收队列对应的至少两个目标数据表的数据更新量，确定导致出现所述数据同步延迟状况的目标业务；对所述目标业务的执行并发度进行调整；基于调整后的执行并发度，控制所述源端运行所述目标业务，以降低所述源端向所述目标端同步数据的数量。本申请降低了数据同步的延迟，保证数据同步过程的稳定进行，并最大化程度降低了数据同步延迟对源端业务连续性的影响。业务连续性的影响。业务连续性的影响。

【技术实现步骤摘要】
数据同步方法、装置、计算机设备和存储介质


[0001]本申请涉及大数据领域，特别是涉及一种数据同步方法、装置、计算机设备和存储介质，可适用于金融领域或其他


技术介绍

[0002]大数据时代，最有价值的资产就是“数据”。数据复制有利于备份和保护数据资产，特别适合于金融业高可靠性的要求，在业务连续性和高可用方面有着巨大的优势。Q复制作为进行数据同步复制的技术手段，在“同城双活”体系中扮演着十分重要的角色，Q
‑
REP的正常运行是保证数据一致性及完整性的必要条件之一。
[0003]现有应用同城目标端代理源端的可分离查询类交易业务，分担了源端的压力，有效的节约了源端的资源。但是，目标端在实际运行过程中，与源端之间可能存在数据同步延迟的情况。
[0004]基于此，如何降低源端向目标端同步数据的延迟成为了亟需解决的技术问题。

技术实现思路

[0005]基于此，有必要针对上述技术问题，提供一种能够降低数据同步延迟的数据同步方法、装置、计算机设备和存储介质。
[0006]第一方面，本申请提供了本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据同步方法，其特征在于，所述方法包括：在将源端的数据同步至目标端的过程中，若识别到源端与目标端之间存在数据同步延迟状况，则根据所述目标端的数据接收队列对应的至少两个目标数据表的数据更新量，确定导致出现所述数据同步延迟状况的目标业务；对所述目标业务的执行并发度进行调整；基于调整后的执行并发度，控制所述源端运行所述目标业务，以降低所述源端向所述目标端同步数据的数量。2.根据权利要求1所述的方法，其特征在于，所述识别到源端与目标端之间存在数据同步延迟状况，包括：若目标端对应的数据接收队列在目标时段的数据处理量等于或大于所述数据接收队列的处理量阈值，则确定所述源端与所述目标端之间存在数据同步延迟状况。3.根据权利要求1所述的方法，其特征在于，所述根据所述目标端的数据接收队列对应的至少两个目标数据表的数据更新量，确定导致出现所述数据同步延迟状况的目标业务，包括：将所述目标端的数据接收队列对应的至少两个目标数据表中数据更新量最大的目标数据表，作为导致出现所述数据同步延迟状况的关键表；根据所述关键表在所述源端对应的源数据表的日志数据，确定导致出现所述数据同步延迟状况的目标业务。4.根据权利要求1所述的方法，其特征在于，所述识别到源端与目标端之间存在数据同步延迟状况之前，所述方法包括：将所述源端的至少两个源数据表中需要在所述目标端进行数据查询的表划分到至少一个第一组中；将所述至少两个源数据表中除所述至少一个第一组中的表之外的表划分到至少一个第二组中；控制所述源端基于各第一组对应的数据发送队列和各第二组对应的数据发...

【专利技术属性】
技术研发人员：罗海波，林晖，吕毓炜，张娟，
申请(专利权)人：中国工商银行股份有限公司，
类型：发明
国别省市：