一种便于分布式数据批量迁移的对象存储架构和迁移方法技术

技术编号:40085816 阅读:35 留言:0更新日期:2024-01-23 15:26
本发明专利技术涉及便于分布式数据批量迁移的对象存储架构和迁移方法,包括以下步骤:存储服务器解析用户存储请求中存储类型信息,若请求中为对象存储则按照对象存储构架进行数据存储;对用户反馈存储成功信息;接收用户的数据批量转移请求,获取存储数据对应的转存数据容器和目标迁移地的转存数据容器;以存储地的转存数据容器和目标迁移地的转存数据容器为中间传输节点,以映射关联关系作为传输通道,将各子数据包快速迁移至目标迁移地的相应属性的数据存储容器中进行存储;依靠存储地的转存数据容器和目标迁移地的转存数据容器来建立传输通道,直接进行数据批量迁移,不需要再进行数据汇总和重新分片处理,从而大幅提升数据批量迁移效率。

【技术实现步骤摘要】

本专利技术涉及数据分布式存储,更具体地说,涉及一种便于分布式数据批量迁移的对象存储架构和迁移方法


技术介绍

1、数据分布式存储是一种数据存储技术,通过网络使用企业中的每台机器上的磁盘空间,并将这些分散的存储资源构成一个虚拟的存储设备,数据分散的存储在企业的各个角落;目前,分布式存储的数据在进行批量迁移时,通常需要先重新汇总数据,然后进行数据转移,再重新进行分片存储,数据处理耗时长,效率极为低下,需要占用服务器资源也较多;

2、对象存储是用来描述解决和处理离散单元的方法的通用术语,这些离散单元被称作为对象;就像文件一样,对象包含数据,但是和文件不同的是,对象在一个层结构中不会再有层级结构,每个对象都在一个被称作存储池的扁平地址空间的同一级别里,一个对象不会属于另一个对象的下一级;

3、目前数据分布式存储大都还是采用的传统存储方式,各存储节点的容量受限制较为严重,这也是限制数据批量转移效率的一大难点,因为需要重新进行分片,如果能够将数据分布式存储与对象存储技术相结合,则可以大大提升数据批量迁移的效率,同时也能够克服传统存储方式带来的容本文档来自技高网...

【技术保护点】

1.一种便于分布式数据批量迁移的对象存储架构和迁移方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的便于分布式数据批量迁移的对象存储架构和迁移方法,其特征在于,所述步骤二中,按照对象存储构架进行数据存储采用:

3.根据权利要求2所述的便于分布式数据批量迁移的对象存储架构和迁移方法,其特征在于,所述方法还包括:

4.根据权利要求2所述的便于分布式数据批量迁移的对象存储架构和迁移方法,其特征在于,对各子数据包进行数据添加处理,将各子数据包格式转换为对象存储格式采用:

5.根据权利要求3所述的便于分布式数据批量迁移的对象存储架构和迁移方法...

【技术特征摘要】

1.一种便于分布式数据批量迁移的对象存储架构和迁移方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的便于分布式数据批量迁移的对象存储架构和迁移方法,其特征在于,所述步骤二中,按照对象存储构架进行数据存储采用:

3.根据权利要求2所述的便于分布式数据批量迁移的对象存储架构和迁移方法,其特征在于,所述方法还包括:

4.根据权利要求2所述的便于分布式数据批量迁移的对象存储架构和迁移方法,其特征在于,对各子数据包进行数据添加处理,将各子数据包格式转换为对象存储格式采用:

5.根据权利要求3所述的便于分布式数据批量迁移的对象存储架构和迁移方法,其特征在于,以存储地的转存数据容器和目标迁移地的转存数据容器为中间传输节点,以映射关联关系作为传输通道...

【专利技术属性】
技术研发人员:张立旭黎明
申请(专利权)人:优网云计算有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1