数据迁移方法、装置、设备及存储介质制造方法及图纸

技术编号:46436810 阅读:7 留言:0更新日期:2025-09-19 20:40
本发明专利技术涉及数据处理技术领域,公开了一种数据迁移方法、装置、设备及存储介质,包括:响应于数据迁移脚本任务,获取预先配置的迁移因子参数,其中,迁移因子参数包括源集群、目标集群、迁移控制标识和迁移类型标识;在迁移控制标识和迁移类型标识指定按照增量迁移的迁移类型执行数据迁移脚本任务的情况下,对数据迁移脚本进行解析处理,得到迁移关键信息;根据源集群、目标集群和迁移关键信息,生成待迁移增量数据的复制命令;执行复制命令,以将待迁移增量数据复制到目标集群。本发明专利技术可应用于金融保险业务数据或医疗数据的跨集群迁移场景,能够降低数据迁移的开发成本,足以应对大规模的数据迁移需求,提升数据迁移的效率、安全性和一致性。

【技术实现步骤摘要】

本专利技术涉及数据处理,尤其涉及一种数据迁移方法、装置、设备及存储介质


技术介绍

1、在大数据时代,跨集群的数据迁移需求不断增加。例如,在金融科技领域,金融保险机构面临着技术更新、集群升级、缺陷修复以及适应数据湖等新技术场景的挑战,需要对金融保险业务涉及的海量金融保险业务数据进行跨集群迁移;在医疗领域,医疗机构同样也面临着相似的挑战,需要对海量的医疗数据进行跨集群迁移。

2、相关技术中提供的传统数据迁移方案仍然存在许多局限性。具体来说,传统数据迁移方案通常依赖手动编写同步脚本,通过指定特定的表名称或文件路径来进行数据同步,这不仅增加了开发成本和时间,在面对大规模数据时,由于手动编写的同步脚本缺乏灵活性和可扩展性,无法适应大规模数据迁移的需求,此外,手动编写的同步脚本还容易忽视或遗漏一些细节,导致数据迁移的过程中出现遗漏、丢失、重复或错误的情况,影响数据迁移的安全性和一致性。


技术实现思路

1、本专利技术提供一种数据迁移方法、装置、计算机设备及存储介质,旨在解决现有数据迁移方案不仅增加了开发成本和本文档来自技高网...

【技术保护点】

1.一种数据迁移方法,其特征在于,包括:

2.如权利要求1所述的数据迁移方法,其特征在于,所述对所述数据迁移脚本任务中的数据迁移脚本进行解析处理,得到迁移关键信息,包括:

3.如权利要求1所述的数据迁移方法,其特征在于,所述执行所述复制命令,以将所述待迁移增量数据复制到所述目标集群,包括:

4.如权利要求1所述的数据迁移方法,其特征在于,所述迁移因子参数包括迁移校验控制标识,所述执行所述复制命令,以将所述待迁移增量数据复制到所述目标集群之后,还包括:

5.如权利要求4所述的数据迁移方法,其特征在于,所述对所述源集群和所述目标集群进行迁移一致...

【技术特征摘要】

1.一种数据迁移方法,其特征在于,包括:

2.如权利要求1所述的数据迁移方法,其特征在于,所述对所述数据迁移脚本任务中的数据迁移脚本进行解析处理,得到迁移关键信息,包括:

3.如权利要求1所述的数据迁移方法,其特征在于,所述执行所述复制命令,以将所述待迁移增量数据复制到所述目标集群,包括:

4.如权利要求1所述的数据迁移方法,其特征在于,所述迁移因子参数包括迁移校验控制标识,所述执行所述复制命令,以将所述待迁移增量数据复制到所述目标集群之后,还包括:

5.如权利要求4所述的数据迁移方法,其特征在于,所述对所述源集群和所述目标集群进行迁移一致性校验,包括:

6.如权利要求4所述的数据迁移方法,其特征在于,所述...

【专利技术属性】
技术研发人员:刘杰
申请(专利权)人:中国平安人寿保险股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1