数据处理方法及装置制造方法及图纸

技术编号:45812999 阅读:15 留言:0更新日期:2025-07-15 22:26
本说明书实施例提供数据处理方法及装置,其中所述方法包括:响应于针对源端存储的目标数据触发的迁移任务,确定迁移任务的数据源配置信息;按照数据源配置信息对迁移任务进行拆分,获得多个迁移子任务,并将多个迁移子任务添加至任务队列;通过任务执行资源执行多个迁移子任务,用于将目标数据迁移至目标端;根据任务执行结果记录多个迁移子任务的任务执行状态,其中,任务执行状态用于对任务进行恢复处理。将迁移任务拆分为多个迁移子任务,通过并发执行多个迁移子任务,提高数据迁移的执行效率;记录迁移子任务的任务执行状态,便于后续基于任务执行状态对任务进行恢复处理,提高数据迁移的可靠性。

【技术实现步骤摘要】

本说明书实施例涉及计算机,特别涉及一种数据处理方法及装置


技术介绍

1、云存储服务提供了稳定、安全、高效以及高扩展的存储服务,不仅直接面向用户提供服务,同时也为上层业务提供了强大支持,是公有云服务中一项非常重要的基础服务。市场上云存储产品众多,随着市场或者云存储用户的需求的不断变动,云存储用户可能会选择使用不同的云存储服务。这就会产生数据在不同的云存储间进行迁移的需求,然而在数据量特别大的情况下,可能会出现因数据迁移影响云存储系统的性能导致迁移效率低下,且可能会出现因迁移失败导致部分数据丢失,使得迁移后的数据完整性不足。因此如何确保数据迁移的高效率和高可靠性是目前亟需解决的问题。


技术实现思路

1、有鉴于此,本说明书实施例提供了一种数据处理方法。本说明书一个或者多个实施例同时涉及一种数据处理装置,一种计算设备,一种计算机可读存储介质以及一种计算机程序产品,以解决现有技术中存在的技术缺陷。

2、根据本说明书实施例的第一方面,提供了一种数据处理方法,包括:

3、响应于针对源端存储的目标数本文档来自技高网...

【技术保护点】

1.一种数据处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,确定所述迁移任务的数据源配置信息,包括:

3.根据权利要求2所述的方法,其特征在于,按照所述数据源配置信息对所述迁移任务进行拆分,获得多个迁移子任务,包括:

4.根据权利要求1所述的方法,其特征在于,获得多个迁移子任务之后,所述方法还包括:

5.根据权利要求1或4所述的方法,其特征在于,将所述多个迁移子任务添加至任务队列之后,所述方法还包括:

6.根据权利要求1所述的方法,其特征在于,通过任务执行资源执行所述多个迁移子任务,包括:

7...

【技术特征摘要】

1.一种数据处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,确定所述迁移任务的数据源配置信息,包括:

3.根据权利要求2所述的方法,其特征在于,按照所述数据源配置信息对所述迁移任务进行拆分,获得多个迁移子任务,包括:

4.根据权利要求1所述的方法,其特征在于,获得多个迁移子任务之后,所述方法还包括:

5.根据权利要求1或4所述的方法,其特征在于,将所述多个迁移子任务添加至任务队列之后,...

【专利技术属性】
技术研发人员:李贝贝袁冠鹏李建良郭子文安晓宇肖春天朱泽宇何雨泉乐坚强杨东林逸杨利华
申请(专利权)人:在线途游北京科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1