System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 分布式数据库同步一致性校验方法、装置、系统及介质制造方法及图纸_技高网

分布式数据库同步一致性校验方法、装置、系统及介质制造方法及图纸

技术编号:41207722 阅读:6 留言:0更新日期:2024-05-09 23:29
本发明专利技术公开了分布式数据库同步一致性校验方法、装置、系统及介质,方法包括:对分布式数据库进行数据同步时,解析获取每次同步的事务请求的唯一有序标识,唯一有序标识是由接收并分发事务请求的计算节点按序添加的;将事务请求的唯一有序标识按预设规则写入同步校验表的指定位置;根据预设校验策略将同步校验表与分布式数据库中对应计算节点的标识添加历史进行对比校验;根据对比校验结果确认当前分布式数据库同步是否一致,并执行相应的同步处理操作。通过在每次同步事务请求时解析获取其唯一有序标识并维护一同步校验表,使得可基于该同步校验表快速准确的确认分布式数据库同步是否存在事务丢失,确保同步的一致性和可靠性。

【技术实现步骤摘要】

本专利技术涉及数据库,尤其涉及分布式数据库同步一致性校验方法、装置、系统及介质


技术介绍

1、随着分布式数据库的不断发展,异构数据库之间的数据同步成为业务割接回退保障的一种兜底方案,也是业务数据扩展应用的一种方案。

2、由于分布式事务涉及的数据操作是分布在多个数据存储节点上的,当分布式数据库向集中式数据库或异构数据库同步时,很可能出现事务丢失、缺少的问题,导致同步数据不一致。


技术实现思路

1、鉴于上述现有技术的不足,本专利技术的目的在于提供可应用于数据库领域的分布式数据库同步一致性校验方法、装置、系统及介质,旨在快速校验分布式数据库同步数据的一致性,提高同步的可靠性。

2、本专利技术的技术方案如下:

3、一种分布式数据库同步一致性校验方法,包括:

4、对分布式数据库进行数据同步时,解析获取每次同步的事务请求的唯一有序标识,所述唯一有序标识是由接收并分发所述事务请求的计算节点按序添加的;

5、将所述事务请求的唯一有序标识按预设规则写入同步校验表的指定位置;

6、根据预设校验策略将所述同步校验表与所述分布式数据库中对应计算节点的标识添加历史进行对比校验;

7、根据对比校验结果确认当前分布式数据库同步是否一致,并执行相应的同步处理操作。

8、在一个实施例中,每个计算节点具有全局唯一id,所述唯一有序标识中包括对应计算节点的全局唯一id以及有序编号。

9、在一个实施例中,所述将所述事务请求的唯一有序标识按预设规则写入同步校验表的指定位置,包括:

10、根据所述唯一有序标识中的全局唯一id确定目标字段,所述同步校验表以不同计算节点的全局唯一id进行分列;

11、根据所述有序编号将所述唯一有序标识按序写入至所述目标字段下的相应位置。

12、在一个实施例中,所述在根据预设校验策略将所述同步校验表与所述分布式数据库中对应计算节点的标识添加历史进行对比校验,包括:

13、设置定时器,在指定时间按预设校验策略确认所述同步校验表中的待校验有序标识;

14、将所述待校验有序标识与对应计算节点的标识添加历史进行对比,确认所述待校验有序标识是否存在断点,以及所述待校验有序标识的最大值是否小于对应计算节点的标识添加历史的最大值。

15、在一个实施例中,所述预设校验策略包括增量校验和全量校验。

16、在一个实施例中,所述根据对比校验结果确认当前分布式数据库同步是否一致,并执行相应的同步处理操作,包括:

17、若所述待校验有序标识存在断点,或所述待校验有序标识的最大值小于对应计算节点的标识添加历史的最大值,则同步不一致,否则同步一致;

18、当同步不一致时,对同步异常位置进行恢复后同步所述事务请求至目标数据库中;

19、当同步一致时,直接同步所述事务请求至目标数据库中。

20、在一个实施例中,所述方法还包括:

21、同步所述事务请求至目标数据库中之时,同步所述事务请求的唯一有序标识。

22、一种分布式数据库同步一致性校验装置,包括:

23、解析获取模块,用于对分布式数据库进行数据同步时,解析获取每次同步的事务请求的唯一有序标识,所述唯一有序标识是由接收并分发所述事务请求的计算节点按序添加的;

24、标识写入模块,用于将所述事务请求的唯一有序标识按预设规则写入同步校验表的指定位置;

25、对比校验模块,用于根据预设校验策略将所述同步校验表与所述分布式数据库中对应计算节点的标识添加历史进行对比校验;

26、同步处理模块,用于根据对比校验结果确认当前分布式数据库同步是否一致,并执行相应的同步处理操作。

27、一种分布式数据库同步一致性校验系统,所述系统包括至少一个处理器;以及,

28、与所述至少一个处理器通信连接的存储器;其中,

29、所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述分布式数据库同步一致性校验方法。

30、一种非易失性计算机可读存储介质,所述非易失性计算机可读存储介质存储有计算机可执行指令,该计算机可执行指令被一个或多个处理器执行时,可使得所述一个或多个处理器执行上述的分布式数据库同步一致性校验方法。

31、有益效果:本专利技术公开了分布式数据库同步一致性校验方法、装置、系统及介质,相比于现有技术,本专利技术实施例通过在每次同步事务请求时解析获取其唯一有序标识并维护一同步校验表,使得可基于该同步校验表快速准确的确认分布式数据库同步是否存在事务丢失,确保同步的一致性和可靠性。

本文档来自技高网...

【技术保护点】

1.一种分布式数据库同步一致性校验方法,其特征在于,包括:

2.根据权利要求1所述的分布式数据库同步一致性校验方法,其特征在于,每个计算节点具有全局唯一ID,所述唯一有序标识中包括对应计算节点的全局唯一ID以及有序编号。

3.根据权利要求2所述的分布式数据库同步一致性校验方法,其特征在于,所述将所述事务请求的唯一有序标识按预设规则写入同步校验表的指定位置,包括:

4.根据权利要求1所述的分布式数据库同步一致性校验方法,其特征在于,所述在根据预设校验策略将所述同步校验表与所述分布式数据库中对应计算节点的标识添加历史进行对比校验,包括:

5.根据权利要求1所述的分布式数据库同步一致性校验方法,其特征在于,所述预设校验策略包括增量校验和全量校验。

6.根据权利要求4所述的分布式数据库同步一致性校验方法,其特征在于,所述根据对比校验结果确认当前分布式数据库同步是否一致,并执行相应的同步处理操作,包括:

7.根据权利要求6所述的分布式数据库同步一致性校验方法,其特征在于,所述方法还包括:

8.一种分布式数据库同步一致性校验装置,其特征在于,包括:

9.一种分布式数据库同步一致性校验系统,其特征在于,所述系统包括至少一个处理器;以及,

10.一种非易失性计算机可读存储介质,其特征在于,所述非易失性计算机可读存储介质存储有计算机可执行指令,该计算机可执行指令被一个或多个处理器执行时,可使得所述一个或多个处理器执行权利要求1-7任一项所述的分布式数据库同步一致性校验方法。

...

【技术特征摘要】

1.一种分布式数据库同步一致性校验方法,其特征在于,包括:

2.根据权利要求1所述的分布式数据库同步一致性校验方法,其特征在于,每个计算节点具有全局唯一id,所述唯一有序标识中包括对应计算节点的全局唯一id以及有序编号。

3.根据权利要求2所述的分布式数据库同步一致性校验方法,其特征在于,所述将所述事务请求的唯一有序标识按预设规则写入同步校验表的指定位置,包括:

4.根据权利要求1所述的分布式数据库同步一致性校验方法,其特征在于,所述在根据预设校验策略将所述同步校验表与所述分布式数据库中对应计算节点的标识添加历史进行对比校验,包括:

5.根据权利要求1所述的分布式数据库同步一致性校验方法,其特征在于,所述预设校验策略包括增量校验和全量校...

【专利技术属性】
技术研发人员:随建张玲东赵耀蒋冬建吕伟初
申请(专利权)人:金篆信科有限责任公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1