【技术实现步骤摘要】
一种基于对象存储服务的数据管理方法、装置及相关组件
本申请涉及对象存储领域,特别是涉及一种基于对象存储服务的数据管理方法、装置及相关组件。
技术介绍
目前分布式文件系统Ceph广泛应用于对象存储服务,对象存储服务主要是提供业务读、写管理和磁盘数据管理功能。Ceph的常用存储引擎Filestore自身存在journal机制,在日志等元数据存储时会有写放大问题,而且在对元数据进行管理时需要和底层磁盘设备进行频繁的数据交互,导致响应速度较慢。此外,在接收数据管理请求时,若读/写数据请求对应同一个磁盘,可能会由于写数据操作未完成,使得读数据请求得到的数据不准确,降低了数据管理性能。因此,如何提供一种解决上述技术问题的方案是本领域技术人员目前需要解决的问题。
技术实现思路
本申请的目的是提供一种基于对象存储服务的数据管理方法、装置、电子设备及一种可读存储介质,相较于现有技术有更快的响应速度,同时还可以避免同一时间对同一个目标存储对象进行数据管理操作,提高了数据管理性能。为解决上述技术问题,本申请提供 ...
【技术保护点】
1.一种基于对象存储服务的数据管理方法,其特征在于,包括:/n根据预设规则将磁盘划分为哈希环上的多个存储对象,计算多个所述存储对象的哈希值;/n将接收到的数据管理请求放入接收队列,所述数据管理请求包含目标存储对象信息;/n判断所述接收队列中是否存在待处理的数据管理请求,所述待处理的数据管理请求中包含的目标存储对象信息与处理队列中的数据管理请求中包含的目标存储对象信息不同;/n若是,将所述待处理的数据管理请求放入所述管理队列;/n计算所述管理队列中每一所述数据管理请求中目标存储对象信息的目标哈希值,通过所述目标哈希值在所述哈希环上确定与该数据管理请求对应的目标存储对象,对所述 ...
【技术特征摘要】
1.一种基于对象存储服务的数据管理方法,其特征在于,包括:
根据预设规则将磁盘划分为哈希环上的多个存储对象,计算多个所述存储对象的哈希值;
将接收到的数据管理请求放入接收队列,所述数据管理请求包含目标存储对象信息;
判断所述接收队列中是否存在待处理的数据管理请求,所述待处理的数据管理请求中包含的目标存储对象信息与处理队列中的数据管理请求中包含的目标存储对象信息不同;
若是,将所述待处理的数据管理请求放入所述管理队列;
计算所述管理队列中每一所述数据管理请求中目标存储对象信息的目标哈希值,通过所述目标哈希值在所述哈希环上确定与该数据管理请求对应的目标存储对象,对所述目标存储对象执行与该数据管理请求对应的数据管理操作。
2.根据权利要求1所述的基于对象存储服务的数据管理方法,其特征在于,所述根据预设规则将磁盘划分为哈希环上的多个存储对象的过程具体包括:
对每一所述磁盘按Lable区、Allocator区、Journal区及Data区进行数据格式化;
按预设规则将所述Data区划分为哈希环上的多个存储对象;
其中:
所述Lable区用于记录所述磁盘的标识信息;
所述Allocator区用于记录所述Data区的存储对象的使用情况,所述使用情况包括使用或未使用;
所述Journal区在接收到存储指令时,存储所述存储对象中的数据。
3.根据权利要求1或2所述的基于对象存储服务的数据管理方法,其特征在于,所述根据预设规则将磁盘划分为哈希环上的多个存储对象的过程具体为:
根据文件对象的大小将将磁盘划分为哈希环上的多个存储对象。
4.根据权利要求2所述的基于对象存储服务的数据管理方法,其特征在于,当所述数据管理请求为写数据请求时,所述对所述目标存储对象执行与该数据管理请求对应的数据管理操作的过程具体为:
通过Allocator区获取所述写数据请求对应的目标存储对象的使用情况;
当所述写数据请求对应的目标存储对象的使用情况为未使用时,对所述目标存储对象执行与所述写数据请求对应的写数据操作;
当所述写数据请求对应的目标存储对象的使用情况为使用时,将所述目标存储对象中的数据写入所述Journ...
【专利技术属性】
技术研发人员:方浩,
申请(专利权)人:北京浪潮数据技术有限公司,
类型:发明
国别省市:北京;11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。