一种跨域异构存储系统的数据迁移方法及系统技术方案

技术编号:42686843 阅读:43 留言:0更新日期:2024-09-10 12:34
本发明专利技术提出了一种跨域异构存储系统的数据迁移方法及系统,将改进的蚁群算法来对数据迁移路径优化问题进行求解,根据路径的传输成功率动态调整信息素浓度,使其与传输成功率成正比,即传输成功率越高的路径,其对应的信息素浓度越高,从而增加选择该路径的概率;根据传输数据量以及目标节点的负载情况动态调整启发函数值,使其与目标节点的负载成反比,负载越重的节点,其对应路径的启发函数值越低,以降低选择该路径的概率,从而实现存储系统的负载均衡,提高数据迁移的效率和质量。

【技术实现步骤摘要】

本专利技术属于数据迁移,尤其涉及一种跨域异构存储系统的数据迁移方法及系统


技术介绍

1、本部分的陈述仅仅是提供了与本专利技术相关的
技术介绍
信息,不必然构成在先技术。

2、随着互联网和物联网的快速发展,传统计算密集型应用正在向数据密集型应用转型,各数据中心的数据呈指数级增长,且分散存放在不同区域不同类型的存储系统中,如分布式文件系统、对象存储系统等,随着数据规模的不断扩大,越来越多的业务场景要求多源数据联合处理,不得不将分散的数据从一个数据中心的存储系统迁移到另一个数据中心的存储系统,以便进行数据融合、分析、共享和使用,这也导致了各数据中心重复存储以及数据访问能力降低,严重影响数据处理效率,因此如何实现跨域环境下不同存储系统间数据的高效迁移和调度,并克服冗余、低效数据传输成为亟待解决的问题。

3、目前存储系统间的数据迁移方法有命令行工具云迁移服务、第三方迁移工具等,而面向多数据中心的异构存储系统间的解决方案包括安藤普、cloud data migration(cdm)以及storage migration service(sms)等本文档来自技高网...

【技术保护点】

1.一种跨域异构存储系统的数据迁移方法,其特征在于,包括:

2.如权利要求1所述的一种跨域异构存储系统的数据迁移方法,其特征在于,根据成功传输的数据量与总传输数据量之间的比值,确定数据传输成功率。

3.如权利要求1或2所述的一种跨域异构存储系统的数据迁移方法,其特征在于,根据待迁移数据,在不同待迁移目的地址节点路径之间的数据传输成功率,更新循环过程中的局部信息素浓度,具体为:

4.如权利要求1所述的一种跨域异构存储系统的数据迁移方法,其特征在于,根据待迁移数据,在不同待迁移目的地址节点路径之间的数据传输成功率,更新循环过程中的全局信息素,具体为:...

【技术特征摘要】

1.一种跨域异构存储系统的数据迁移方法,其特征在于,包括:

2.如权利要求1所述的一种跨域异构存储系统的数据迁移方法,其特征在于,根据成功传输的数据量与总传输数据量之间的比值,确定数据传输成功率。

3.如权利要求1或2所述的一种跨域异构存储系统的数据迁移方法,其特征在于,根据待迁移数据,在不同待迁移目的地址节点路径之间的数据传输成功率,更新循环过程中的局部信息素浓度,具体为:

4.如权利要求1所述的一种跨域异构存储系统的数据迁移方法,其特征在于,根据待迁移数据,在不同待迁移目的地址节点路径之间的数据传输成功率,更新循环过程中的全局信息素,具体为:

5.如权利要求1所述的一种跨域异构存储系统的数据迁移方法,其特征在于,根据当前存储使用量与总存储容量的比值,确定节点的存储状况;根据实际可用宽带与网络总宽带的比值,确定节点的实时网络状况;根据当前传输的数据量在本次迁移中所占的比例,确定传输的数据量。

6.如权利要求1所述的一种跨域...

【专利技术属性】
技术研发人员:武鲁臧书昌王春晓刘秋月王英龙赵志刚郭莹翟发路郝彤阳郝国鹏温华岗
申请(专利权)人:山东省计算中心国家超级计算济南中心
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1