【技术实现步骤摘要】
数据校验方法、装置、电子设备及计算机可读存储介质
[0001]本申请涉及数据处理
,具体而言,本申请涉及一种数据校验方法、装置、电子设备及计算机可读存储介质。
技术介绍
[0002]数据迁移是指将存储在第一数据库中的数据迁移到第二数据库的过程;数据校验是指在数据迁移完成后,对第一数据库中的数据和迁移到第二数据库中的数据进行一致性校验的过程。数据迁移过程可划分为两个过程:全量迁移和增量迁移。其中,全量数据迁移是指在预设时间点暂停对第一数据库的写入,将第一数据库当前的所有数据迁移至第二数据库,全量迁移过程迁移的数据称之为全量数据;增量迁移是指在迁移完所有的全量数据后,恢复对第一数据库中数据的写入,对第一数据库中变更的数据进行迁移的过程,增量迁移过程迁移的数据成为增量数据。
[0003]在全量数据迁移完成后,对全量数据进行校验,即将第一、第二数据库中的数据进行比对,判断第一与第二数据库中的数据是否一致,这一过程第一、第二数据库都是暂停写入的也没有变化的数据,因此能够对全量数据进行准确校验;增量数据在迁移的过程中,因为 ...
【技术保护点】
【技术特征摘要】
1.一种数据校验方法,其特征在于,包括:确定目标事务由第一数据库迁移至第二数据库,其中,所述目标事务为所述第一数据库中已执行的数据库事务;确定所述目标事务对应的事务标识和第一执行结果,其中,所述事务标识是确定所述数据库事务的唯一标识,并且所述第一执行结果是所述目标事务在所述第一数据库中执行完成后对应得到的执行结果;获取所述第二数据库中与所述目标事务的事务标识存在关联关系的目标快照,其中,所述目标快照中记录所述第二数据库执行迁移完成的至少一个数据库事务后对应得到的至少一个执行结果,并且所述至少一个数据库事务中包括所述目标事务;从所述至少一个执行结果中确定所述第一执行结果对应的第二执行结果;确定对所述第一执行结果和所述第二执行结果进行一致性校验后得到的第一校验结果,所述第一校验结果用于表征所述第一执行结果和所述第二执行结果是否一致。2.根据权利要求1所述的方法,其特征在于,所述确定所述目标事务的事务标识和第一执行结果,包括:将所述目标事务存储至缓存,解析所述缓存中的所述目标事务,得到所述目标事务的事务标识和第一执行结果。3.根据权利要求1或2任意一项所述的方法,其特征在于,所述执行结果包括对应数据行的主键;所述从所述至少一个执行结果中确定所述第一执行结果对应的第二执行结果,包括:从所述至少一个执行结果中确定与所述第一执行结果具备相同的主键的第二执行结果。4.根据权利要求3所述的方法,其特征在于,所述目标事务包括至少一个事件;所述确定所述目标事务的事务标识和第一执行结果之前,还包括:若确定所述目标事务中的两个事件的数据行的主键相同,则对所述两个事件进行合并,得到一个新的事件。5.根据权利要求4所述的方法,其特征在于,所述对所述两个事件进行合并,得到一个新的事件,包括:确定所述两个事件分别为第一事件和第二事件;所述第一事件的顺序先于所述第二事件;确定所述第一事件和所述第二事件的事件类型,所述事务类型包括插入类型、更新类型以及删除类型;若所述第一事件的事件类型和所述第二事件的事件类型符合预设的合并规则,则重新确定所述第二事件为将所述第一事件和所述第二事件进行合并后得到的新的事件,并删除所述第一事件。6.根据权利要求1所述的方法,其特征在于,所述获取所述第二数据库中与所述目标事务的事务标识存在关联关系的目标快照,包括:所述第二数据库生成与所述至少一个执行结果对应的快照并生成与所述快照对应的快照标识;建立所述事务标识和所述快照标识之间的关联关系,其中,至少一个所述事务标识包
括所述目标事务的事务标识;获取与所述目标事务的事务标识存在所述关联关系的目标快照标识,其中,所述目标快照标识是确定所述目标快照的唯一标识;根据所述目标快照标识从所述第二数据库中确定目标快照。7...
【专利技术属性】
技术研发人员:居佳佳,刘奇,黄东旭,崔秋,
申请(专利权)人:平凯星辰北京科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。