一种数据库间的数据一致性比对方法及装置制造方法及图纸

本申请提供一种数据库间的数据一致性比对方法及装置，涉及数据库中数据一致性比对领域，包括：基于表数据选一个字段为计算数据块边界的条件列，计算条件列的最大值和最小值；根据最小值计算出数据块边界，将最大值标记为下一次的边界查询最小值，重复计算出整个表的数据块边界；配置启动2n个线程，分别分配n个线程负责处理源表数据和目标表数据，和从条件队列获取数据块边界值；查询源表边界值范围内的所有主键值，根据主键计算相同数据块边界对应的数据中源表与目标表的差异数据。本申请通过算法将数据分解成多个数据块边界，每个数据块边界可以独立进行数据查询比对，多个数据块边界间可以并行比对从而提升性能，提高比对速度，降低比对难度。降低比对难度。降低比对难度。

【技术实现步骤摘要】
一种数据库间的数据一致性比对方法及装置


[0001]本申请涉及数据库中数据一致性比对领域，尤其涉及一种数据库间的数据一致性比对方法。本申请还涉及一种数据库间的数据一致性比对装置。

技术介绍

[0002]随着大数据的发展，很多业务场景中会涉及到数据同步的操作。
[0003]现有技术中，一般需要将主节点数据同步到备节点数据，或者将某一类型数据库表的数据同步到其他类型数据库表中。同步中如果出现数据不一致，通常采用人工方法将差异数据比对出来。
[0004]现有技术中存在的缺陷是，采用人工方法很难将差异数据比对出来，特别是异构数据库间本身不互通，更难于操作。

技术实现思路

[0005]本申请的目的在于克服现有技术中人工方法很难将差异数据比对出来的缺陷，提供一种数据库间的数据一致性比对方法。本申请还涉及一种数据库间的数据一致性比对装置。
[0006]本申请提供的一种数据库间的数据一致性比对方法，包括：
[0007]基于表数据中选取一个字段作为计算数据块边界的条件列，计算出该表所述条件列的最大值和最小值；...

【技术保护点】

【技术特征摘要】
1.一种数据库间的数据一致性比对方法，其特征在于，包括：基于表数据中选取一个字段作为计算数据块边界的条件列，计算出该表所述条件列的最大值和最小值；根据所述最小值计算出数据块边界，同时将所述最大值标记为下一次的边界查询最小值，重复并计算出整个表的数据块边界；配置启动2n个线程，分别分配n个线程负责处理源表数据和目标表数据，以及从条件队列获取数据块边界值；查询所述源表边界值范围内的所有主键值，根据主键计算相同数据块边界对应的数据中源表与目标表的差异数据。2.根据权利要求1所述数据库间的数据一致性比对方法，其特征在于，所述条件列有索引。3.根据权利要求1所述数据库间的数据一致性比对方法，其特征在于，所述计算出该表所述条件列的最大值和最小值，包括：通过【selectmin(c1），max(c1）fromt】计算出该表所述条件列的最大值和最小值；其中，所述c1表示条件列，所述min(c1）记为初始化的边界查询最小值，max(c1)为下一次的边界查询最小值。4.根据权利要求3所述数据库间的数据一致性比对方法，其特征在于，所述计算出数据块边界，包括：通过【selectmax(c1）fromtwherec1>=边界查询最小值orderbyc1limit1000】计算出数据块边界为【max(c1)值
‑
sql的查询条件列的值】，max(c1)为下一次的边界查询最小值；其中，所述c1表示条件列。5.根据权利要求1所述数据库间的数据一致性比对方法，其特征在于，所述查询所述源表边界值范围内的所有主键值形式如下：select主键列1，...，主键列n...

【专利技术属性】
技术研发人员：卜洪涛，刘金鑫，
申请(专利权)人：天津南大通用数据技术股份有限公司，
类型：发明
国别省市：