数据迁移方法、系统、装置、电子设备及存储介质制造方法及图纸

技术编号:37451153 阅读:17 留言:0更新日期:2023-05-06 09:23
本发明专利技术实施例提供了一种数据迁移方法、系统、装置、电子设备及存储介质,涉及云计算技术领域,具体实现方案为:获取多家预设公有云对应的各项单价及当前数据存储总量;根据所述多家预设公有云对应的各项单价及当前数据存储总量,计算在数据迁移造成的各项费用之和最小的情况下,多家预设公有云中各家公有云的待迁移数据量;所述各项单价为所述多家预设公有云的不同收费维度分别对应的单价,所述各项费用与所述各项单价相对应;基于多家预设公有云中各家公有云的待迁移数据量,生成多个迁移任务。本发明专利技术实施例能够实现数据存储与固有公有云的解耦,降低对存储成本的影响。降低对存储成本的影响。降低对存储成本的影响。

【技术实现步骤摘要】
数据迁移方法、系统、装置、电子设备及存储介质


[0001]本专利技术涉及云计算
,特别是涉及数据迁移方法、系统、装置、电子设备及存储介质。

技术介绍

[0002]目前,随着互联网业务的不断增加以及大数据的发展,各家企业需要存储的数据量越来越大。对象存储服务(Object storage service,OSS)有高带宽、高并发、海量存储,横向扩容方便,价格低廉等特点,因此越来越多的企业选择使用对象存储作为他们的数据存储的形式。其中各家公有云的对象存储因为其数据规模较大,单位价格较低,成为很多企业的首选。
[0003]目前,常见的公有云对接方案是业务通过该公有云提供的软件开发工具包(Software Development Kit,SDK)经内网专线或者外网直接对接公有云对象存储服务,即该业务将数据固定存储在该公有云上,导致业务与该家公有云耦合严重。而一家公有云对应的存储空间单价和流量单价等均由该家公有云制定,且存储空间单价和流量单价等这些影响存储成本的信息是动态变化的,业务将数据存储在该公有云上会使存储产生的存储成本受制于该家公有云,可能导致存储成本较高。

技术实现思路

[0004]本专利技术实施例的目的在于提供一种数据迁移方法、系统、装置、电子设备及存储介质,以实现数据存储与固有公有云的解耦,降低对存储成本的影响。具体技术方案如下:
[0005]在本专利技术实施的第一方面,首先提供了一种数据迁移方法,所述方法包括:
[0006]获取多家预设公有云对应的各项单价及当前数据存储总量;
[0007]根据所述多家预设公有云对应的各项单价及当前数据存储总量,计算在数据迁移造成的各项费用之和最小的情况下,多家预设公有云中各家公有云的待迁移数据量;所述各项单价为所述多家预设公有云的不同收费维度分别对应的单价,所述各项费用与所述各项单价相对应;
[0008]基于多家预设公有云中各家公有云的待迁移数据量,生成多个迁移任务,所述迁移任务用于将数据从至少一个源公有云迁移至至少一个目标公有云。
[0009]在一种可能的实施方式中,所述基于多家预设公有云中各家公有云的待迁移数据量,生成多个迁移任务,包括:
[0010]基于多家预设公有云中各家公有云的待迁移数据量,确定多家预设公有云中各源公有云与各目标公有云之间的映射关系,以及所述映射关系对应的待迁移数据量;
[0011]基于各源公有云与各目标公有云之间的映射关系,以及所述映射关系对应的待迁移数据量,生成多个迁移任务;针对每一映射关系,所述迁移任务用于将所述映射关系对应的待迁移数据量从所述映射关系对应的源公有云迁移至所述映射关系对应的目标公有云。
[0012]在一种可能的实施方式中,所述基于多家预设公有云中各家公有云的待迁移数据
量,确定多家预设公有云中各源公有云与各目标公有云之间的映射关系,以及所述映射关系对应的待迁移数据量,包括:
[0013]从所述多家预设公有云中任意选择一源公有云和一目标公有云;其中,所述多家预设公有云中各家预设公有云的待迁移数据量均不为零;
[0014]记录选择得到的源公有云与目标公有云之间存在映射关系;
[0015]将所述映射关系对应的源公有云的待迁移数据量的绝对值作为第一绝对值,将所述映射关系对应的目标公有云的待迁移数据量的绝对值作为第二绝对值,选择所述第一绝对值和所述第二绝对值中的最小绝对值对应的数据量,作为所述映射关系对应的待迁移数据量,并基于所述映射关系对应的待迁移数据量更新所述源公有云与所述目标公有云的待迁移数据量;
[0016]继续从待迁移数据量不为零的多家预设公有云中选择一源公有云与一目标公有云,确定选择出的源公有云与目标公有云之间的映射关系以及映射关系对应的待迁移数据量,直至得到所述多家预设公有云中各源公有云与各目标公有云之间的映射关系以及所述映射关系对应的待迁移数据量。
[0017]在一种可能的实施方式中,所述基于多家预设公有云中各家公有云的待迁移数据量,确定多家预设公有云中各源公有云与各目标公有云之间的映射关系,以及所述映射关系对应的待迁移数据量,包括:
[0018]对所述多家预设公有云进行编号;其中,所述多家预设公有云中各家预设公有云的待迁移数据量均不为零;
[0019]按照所述编号的顺序,选择出编号最相近的一源公有云与一目标公有云,并记录所述编号最相近的一源公有云与一目标公有云之间存在映射关系;
[0020]从所述编号最相近的一源公有云与一目标公有云分别对应的待迁移数据量的绝对值中,选择最小绝对值对应的数据量作为所述映射关系对应的待迁移数据量,并基于所述映射关系对应的待迁移数据量更新所述编号最相近的一源公有云与一目标公有云分别对应的待迁移数据量;
[0021]继续按照所述编号的顺序,从待迁移数据量不为零的多家预设公有云中选择编号最相近的一源公有云与一目标公有云,确定选择出的编号最相近的一源公有云与一目标公有云之间的映射关系以及映射关系对应的待迁移数据量,直至得到所述多家预设公有云中各源公有云与各目标公有云之间的映射关系以及所述映射关系对应的待迁移数据量。
[0022]在一种可能的实施方式中,所述各项单价包括:存储空间单价和流量单价;所述各项费用包括:存储空间费用与流量费用;
[0023]所述获取多家预设公有云对应的各项单价,包括:
[0024]获取多家预设公有云对应的存储空间单价和流量单价;
[0025]所述根据所述多家预设公有云对应的各项单价及当前数据存储总量,计算在数据迁移造成的各项费用之和最小的情况下,多家预设公有云中各家公有云的待迁移数据量,包括:
[0026]根据所述多家预设公有云对应的存储空间单价、流量单价及当前数据存储总量,计算在存储空间费用与流量费用之和最小的情况下,多家预设公有云中各家公有云的待迁移数据量;其中,所述存储空间费用为基于所述各家公有云的待迁移数据量对当前数据存
储总量进行计算得到的数据存储总量,与所述各家公有云对应的存储空间单价的乘积之和;所述流量费用为所述各家公有云的待迁移数据量与所述各家公有云对应的流量单价的乘积之和;所述数据存储总量通过所述各家公有云的当前数据存储总量加上或减去对应的待迁移数据量得到。
[0027]在一种可能的实施方式中,所述根据所述多家预设公有云对应的存储空间单价、流量单价及数据存储总量,计算在存储空间费用与流量费用之和最小的情况下,多家预设公有云中各家公有云的待迁移数据量,包括:
[0028]将所述多家预设公有云分别对应的存储空间单价、流量单价、当前数据存储总量输入预设公式中,通过所述预设公式确定在存储空间费用与流量费用之和最小的情况下,多家预设公有云中各家公有云待迁移的数据量;其中,所述预设公式包括:
[0029]q1+q2+

+q
i
+

+q
n
=0
[0030]Ptraffic=p1(q1)+p2本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据迁移方法,其特征在于,所述方法包括:获取多家预设公有云对应的各项单价及当前数据存储总量;根据所述多家预设公有云对应的各项单价及当前数据存储总量,计算在数据迁移造成的各项费用之和最小的情况下,多家预设公有云中各家公有云的待迁移数据量;所述各项单价为所述多家预设公有云的不同收费维度分别对应的单价,所述各项费用与所述各项单价相对应;基于多家预设公有云中各家公有云的待迁移数据量,生成多个迁移任务,所述迁移任务用于将数据从至少一个源公有云迁移至至少一个目标公有云。2.根据权利要求1所述的方法,其特征在于,所述基于多家预设公有云中各家公有云的待迁移数据量,生成多个迁移任务,包括:基于多家预设公有云中各家公有云的待迁移数据量,确定多家预设公有云中各源公有云与各目标公有云之间的映射关系,以及所述映射关系对应的待迁移数据量;基于各源公有云与各目标公有云之间的映射关系,以及所述映射关系对应的待迁移数据量,生成多个迁移任务;针对每一映射关系,所述迁移任务用于将所述映射关系对应的待迁移数据量从所述映射关系对应的源公有云迁移至所述映射关系对应的目标公有云。3.根据权利要求2所述的方法,其特征在于,所述基于多家预设公有云中各家公有云的待迁移数据量,确定多家预设公有云中各源公有云与各目标公有云之间的映射关系,以及所述映射关系对应的待迁移数据量,包括:从所述多家预设公有云中任意选择一源公有云和一目标公有云;其中,所述多家预设公有云中各家预设公有云的待迁移数据量均不为零;记录选择得到的源公有云与目标公有云之间存在映射关系;将所述映射关系对应的源公有云的待迁移数据量的绝对值作为第一绝对值,将所述映射关系对应的目标公有云的待迁移数据量的绝对值作为第二绝对值,选择所述第一绝对值和所述第二绝对值中的最小绝对值对应的数据量,作为所述映射关系对应的待迁移数据量,并基于所述映射关系对应的待迁移数据量更新所述源公有云与所述目标公有云的待迁移数据量;继续从待迁移数据量不为零的多家预设公有云中选择一源公有云与一目标公有云,确定选择出的源公有云与目标公有云之间的映射关系以及映射关系对应的待迁移数据量,直至得到所述多家预设公有云中各源公有云与各目标公有云之间的映射关系以及所述映射关系对应的待迁移数据量。4.根据权利要求3所述的方法,其特征在于,所述基于多家预设公有云中各家公有云的待迁移数据量,确定多家预设公有云中各源公有云与各目标公有云之间的映射关系,以及所述映射关系对应的待迁移数据量,包括:对所述多家预设公有云进行编号;其中,所述多家预设公有云中各家预设公有云的待迁移数据量均不为零;按照所述编号的顺序,选择出编号最相近的一源公有云与一目标公有云,并记录所述编号最相近的一源公有云与一目标公有云之间存在映射关系;从所述编号最相近的一源公有云与一目标公有云分别对应的待迁移数据量的绝对值中,选择最小绝对值对应的数据量作为所述映射关系对应的待迁移数据量,并基于所述映
射关系对应的待迁移数据量更新所述编号最相近的一源公有云与一目标公有云分别对应的待迁移数据量;继续按照所述编号的顺序,从待迁移数据量不为零的多家预设公有云中选择编号最相近的一源公有云与一目标公有云,确定选择出的编号最相近的一源公有云与一目标公有云之间的映射关系以及映射关系对应的待迁移数据量,直至得到所述多家预设公有云中各源公有云与各目标公有云之间的映射关系以及所述映射关系对应的待迁移数据量。5.根据权利要求1所述的方法,其特征在于,所述各项单价包括:存储空间单价和流量单价;所述各项费用包括:存储空间费用与流量费用;所述获取多家预设公有云对应的各项单价,包括:获取多家预设公有云对应的存储空间单价和流量单价;所述根据所述多家预设公有云对应的各项单价及当前数据存储总量,计算在数据迁移造成的各项费用之和最小的情况下,多家预设公有云中各家公有云的待迁移数据量,包括:根据所述多家预设公有云对应的存储空间单价、流量单价及当前数据存储总量,计算在存储空间费用与流量费用之和最小的情况下,多家预设公有云中各家公有云的待迁移数据量;其中,所述存储空间费用为基于所述各家公有云的待迁移数据量对当前数据存储总量进行计算得到的数据存储总量,与所述各家公有云对应的存储空间单价的乘积之和;所述流量费用为...

【专利技术属性】
技术研发人员:卞庞
申请(专利权)人:北京奇艺世纪科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1