一种分布式存储系统的对象管理方法、装置及设备和介质制造方法及图纸

技术编号:40537683 阅读:34 留言:0更新日期:2024-03-01 14:00
本申请公开了一种分布式存储系统的对象管理方法、装置及设备和介质,涉及计算机技术领域,该方法包括:根据对象归置组单元的时间参数和虚拟空间组的时间参数将多个对象归置组单元映射至多个虚拟空间组;当分布式存储系统扩展时,创建新的第一虚拟空间组,将扩展的存储设备映射至第一虚拟空间组;根据对象归置组单元的时间参数确定需要迁移的第一待迁移对象归置组单元,并将第一待迁移对象归置组单元迁移至第一虚拟空间组中扩展的存储设备。本申请降低了分布式存储系统扩展时的数据迁移量。

【技术实现步骤摘要】

本申请涉及计算机,更具体地说,涉及一种分布式存储系统的对象管理方法、装置及设备和介质


技术介绍

1、分布式存储属于新型数据存储技术,能够将数据通过映射算法均衡分布存储至多个存储服务器中的虚拟存储设备,这种数据映射算法能够使得分布式存储具有弹性扩展性、高可用性、生产成本低等优势,分布式存储已逐渐成为各大企业处理海量业务数据的重要技术。分布式存储系统通常使用对象为存储单位,对数据进行分散存储,数据映射分散存储算法对分布式的扩展性和故障场景快速恢复至关重要。

2、在相关技术中,分布式存储系统采用crush(controlled replication underscalable hashing,受控的可扩展副本哈希算法)算法实现其扩展性、高可用性,由于crush算法随机分配是概率统计意义上的数据均衡,当小规模集群,pg(placement group,对象归置组单元)数据相对较少时,会产生一些不均匀的情况,通过调整相关参数,才能达到数据均衡。在对分布式存储系统进行扩展时,crush算法对新扩展节点数据对象进行均衡迁移数据,当数据迁移达到一定数量级,本文档来自技高网...

【技术保护点】

1.一种分布式存储系统的对象管理方法,其特征在于,包括:

2.根据权利要求1所述对象管理方法,其特征在于,所述对象归置组单元的时间参数包括创建时间、扩展时间、映射虚拟空间组的时间中的最新时间、所述虚拟空间组的时间参数包括创建时间、扩展时间中的最新时间。

3.根据权利要求1所述对象管理方法,其特征在于,所述根据对象归置组单元的时间参数和虚拟空间组的时间参数将多个所述对象归置组单元映射至多个所述虚拟空间组,包括:

4.根据权利要求1所述对象管理方法,其特征在于,所述根据所述对象归置组单元的时间参数确定需要迁移的第一待迁移对象归置组单元,包括:

...

【技术特征摘要】

1.一种分布式存储系统的对象管理方法,其特征在于,包括:

2.根据权利要求1所述对象管理方法,其特征在于,所述对象归置组单元的时间参数包括创建时间、扩展时间、映射虚拟空间组的时间中的最新时间、所述虚拟空间组的时间参数包括创建时间、扩展时间中的最新时间。

3.根据权利要求1所述对象管理方法,其特征在于,所述根据对象归置组单元的时间参数和虚拟空间组的时间参数将多个所述对象归置组单元映射至多个所述虚拟空间组,包括:

4.根据权利要求1所述对象管理方法,其特征在于,所述根据所述对象归置组单元的时间参数确定需要迁移的第一待迁移对象归置组单元,包括:

5.根据权利要求1所述对象管理方法,其特征在于,将所述第一待迁移对象归置组单元迁移至所述第一虚拟空间组中扩展的存储设备之后,还包括:

6.根据权利要求1所述对象管理方法,其特征在于,还包括:

7.根据权利要求6所述对象管理方法,其特征在于,所述确定需要拆分的待拆分虚拟空间组,包括:

8.根据权利要求6所述对象管理方法,其特征在于,所述根据所述待拆分虚拟空间组中对象归置组单元的时间参数在所述待拆分虚拟空间组中确定第二待迁移对象归置组单元,包括:

9.根据权利要求6所述对象管理方法,其特征在于,将所述第二待迁移对象归置组单元迁移至所述第二虚拟空间组之后,还包括:

10.根据权利要求1所述对象管理方法,其特征在于,还包括:

11.根据权利要求10所述...

【专利技术属性】
技术研发人员:臧林劼何怡川孟祥瑞李晓伟
申请(专利权)人:济南浪潮数据技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1