数据分级存储方法、装置和电子设备制造方法及图纸

技术编号:44573257 阅读:28 留言:0更新日期:2025-03-11 14:33
本发明专利技术提供一种数据分级存储方法、装置和电子设备,涉及数据存储技术领域,所述方法包括:获取待存储数据和分布式存储系统中所有初始存储资源各自对应的延时数据;基于所有延时数据,确定目标延时等级,目标延时等级用于表征所有延时数据中的超时数据比例;基于目标延时等级,以及待存储数据对应的存储资源序列,确定目标存储资源,并基于纠删码算法、待存储数据和目标存储资源,确定目标存储资源对应的目标存储数据,存储资源序列中包括待存储数据对应的至少两个存储资源;将目标存储数据存储至目标存储资源。本发明专利技术可减小存储延时,提高数据存储的成功率和存储性能。

【技术实现步骤摘要】

本专利技术涉及数据存储,尤其涉及一种数据分级存储方法、装置和电子设备


技术介绍

1、分布式存储系统中,一般由多个存储节点组成一个集群,每个存储节点由多个磁盘或其它非暂态存储介质组成,每个磁盘作为一个资源提供载体,向待存储数据提供存储空间。存储过程一般采用纠删码算法进行存储,即,将待存储数据划分为k个数据分块,并根据纠删码算法,计算出m个校验分块,将数据分块和校验分块分别存储至对应的存储资源中,并将k+m个存储资源确定为该待存储资源对应的存储资源序列,其中,每个存储资源分别处于不同的存储节点中。

2、然而,在根据纠删码算法进行存储时,只有待存储数据对应的所有分块全部存储成功,该待存储数据才算存储完成,若存在某些存储资源因读写速度较慢、该存储资源进行数据迁移、该存储资源进行数据修复或存储业务处于业务高峰期等原因,造成该存储资源的延时超时,将导致整个待存储数据存储超时,进而导致该待存储数据对应的前端业务阻塞。


技术实现思路

1、本专利技术提供一种数据分级存储方法、装置和电子设备,用以解决现有技术中待存本文档来自技高网...

【技术保护点】

1.一种数据分级存储方法,其特征在于,包括:

2.根据权利要求1所述的数据分级存储方法,其特征在于,所述基于所述目标延时等级,以及所述待存储数据对应的存储资源序列,确定目标存储资源,包括:

3.根据权利要求1所述的数据分级存储方法,其特征在于,所述基于所述目标延时等级,以及所述待存储数据对应的存储资源序列,确定目标存储资源,包括:

4.根据权利要求3所述的数据分级存储方法,其特征在于,所述基于所述存储资源序列中各所述存储资源对应的延时数据,确定所述目标存储资源,包括:

5.根据权利要求1所述的数据分级存储方法,其特征在于,所述基于所述目标延...

【技术特征摘要】

1.一种数据分级存储方法,其特征在于,包括:

2.根据权利要求1所述的数据分级存储方法,其特征在于,所述基于所述目标延时等级,以及所述待存储数据对应的存储资源序列,确定目标存储资源,包括:

3.根据权利要求1所述的数据分级存储方法,其特征在于,所述基于所述目标延时等级,以及所述待存储数据对应的存储资源序列,确定目标存储资源,包括:

4.根据权利要求3所述的数据分级存储方法,其特征在于,所述基于所述存储资源序列中各所述存储资源对应的延时数据,确定所述目标存储资源,包括:

5.根据权利要求1所述的数据分级存储方法,其特征在于,所述基于所述目标延时等级,以及所述待存储数据对应的存储资源序列,确定目标存储资源,包括:

【专利技术属性】
技术研发人员:尧婷娟丁强
申请(专利权)人:浙江宇视科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1