数据同步方法、装置、电子设备及存储介质制造方法及图纸

技术编号:43085601 阅读:17 留言:0更新日期:2024-10-26 09:34
本申请公开了一种数据同步方法、装置、电子设备及存储介质。该方法包括:响应于数据操作指令,对第一存储系统中的待同步数据进行数据操作,得到目标同步数据以及目标同步数据对应的目标元数据;对目标元数据与目标数据库存储的历史元数据进行匹配,得到匹配结果,其中,历史元数据为上一次数据同步后,存在第一存储系统中的数据所对应的元数据;在匹配结果指示目标元数据与历史元数据之间存在差异的情况下,基于目标元数据生成数据同步任务;执行数据同步任务,以将目标同步数据同步至第二存储系统中,其中,第一存储系统与第二存储系统为不同的存储系统。本申请所提供的方案降低了数据同步的传输时延,提高了数据同步的效率。

【技术实现步骤摘要】

本申请属于物联网大数据,尤其涉及一种数据同步方法、装置、电子设备及存储介质


技术介绍

1、随着大数据的飞速发展,数据已经成为仅次于石油的重要资源,企业数据每天都在产生并且数据量呈现爆炸式增长,大数据集群的数量以及多数据中心越来越多,跨数据集群间、跨数据中心间的海量数据同步传输需求变得十分频繁与紧迫,且大部分业务要求数据实时同步传输,即在同步数据时要求数据同步低时延,数据时效性要求较高。然而,跨数据集群间的高延迟数据同步使得数据时效性差,无法满足业务发展的需要,尤其在物联网领域,例如,物联卡实时风险防控等业务,若数据同步传输存在较高的延迟,则会降低数据的价值,甚至该数据会成为垃圾无用数据,造成了数据资源的浪费。


技术实现思路

1、本申请实施例提供一种数据同步方法、装置、电子设备及存储介质,能够降低数据同步的传输时延,提高数据同步的效率。

2、第一方面,本申请实施例提供一种数据同步方法,该方法包括:响应于数据操作指令,对第一存储系统中的待同步数据进行数据操作,得到目标同步数据以及目标同步数据对应的目本文档来自技高网...

【技术保护点】

1.一种数据同步方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,对第一存储系统中的待同步数据进行数据操作,得到目标同步数据以及所述目标同步数据对应的目标元数据,包括:

3.根据权利要求1所述的方法,其特征在于,对所述目标元数据与目标数据库存储的历史元数据进行匹配,得到匹配结果,包括:

4.根据权利要求3所述的方法,其特征在于,在对所述目标元数据与目标数据库存储的历史元数据进行匹配,得到匹配结果之后,所述方法还包括:

5.根据权利要求3所述的方法,其特征在于,基于所述目标元数据生成数据同步任务,包括:</p>

6.根据...

【技术特征摘要】

1.一种数据同步方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,对第一存储系统中的待同步数据进行数据操作,得到目标同步数据以及所述目标同步数据对应的目标元数据,包括:

3.根据权利要求1所述的方法,其特征在于,对所述目标元数据与目标数据库存储的历史元数据进行匹配,得到匹配结果,包括:

4.根据权利要求3所述的方法,其特征在于,在对所述目标元数据与目标数据库存储的历史元数据进行匹配,得到匹配结果之后,所述方法还包括:

5.根据权利要求3所述的方法,其特征在于,基于所述目标元数据生成数据同步任务,包括:

6.根据权利要求5所述的方法,其特征在于,所述同步操作类型包括如下至少之一:数据增加类型、数据更新类型以及数据删除类型...

【专利技术属性】
技术研发人员:李雷
申请(专利权)人:中移物联网有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1