数据存储方法、装置、设备及存储介质制造方法及图纸

技术编号:41328546 阅读:26 留言:0更新日期:2024-05-13 15:06
本申请提供了一种数据存储方法、装置、设备及存储介质,可以应用于云存储、对象存储、大数据、数据库等多种场景,该方法包括:获取待存储的多个数据块,数据块是对待存储数据进行块划分得到;从多个数据块中,选出数据块大小小于预设值的P个数据块;将P个数据块作为一个存储块,切分成预设的K个数据切片,使得P个数据块中被切分在多个数据切片中的数据块的数量最小;将K个数据切片存储在磁带库中。本申请减少待存储的存储块的个数,进而减少对磁带库的存储访问次数,节约了元数据存储空间,且使得P个数据块中被切分在多个数据切片中的数据块的数量最小,以提高数据读取性能。

【技术实现步骤摘要】

本申请实施例涉及计算机,尤其涉及一种数据存储方法、装置、设备及存储介质


技术介绍

1、随着互联网技术的快速发展,需要存储的数据越来越多,对象存储(cloud objectstorage,cos)应用而生。对象存储是一种存储海量文件的分布式存储服务,对象可通过网络随时存储和查看数据。

2、目前的对象存储过程是,将对象将待存储的数据输入数据存储系统,以使数据存储系统将对象输入的待存储的数据写入磁带库。但是,目前数据存储方法,需要频繁访问磁带库,进而减低存储性能。


技术实现思路

1、本申请实施例提供一种数据存储方法、装置、设备及存储介质,提升数据存储性能。

2、第一方面,本申请实施例提供一种数据存储方法,包括:

3、获取待存储的多个数据块,所述数据块是对待存储数据进行块划分得到;

4、从所述多个数据块中,选出数据块大小小于预设值的p个数据块,所述p为大于1的正整数;

5、将所述p个数据块作为一个存储块,切分成预设的k个数据切片,使得所述p个数据块中被切分本文档来自技高网...

【技术保护点】

1.一种数据存储方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述将所述P个数据块作为一个存储块,切分成预设的K个数据切片,包括:

3.根据权利要求2所述的方法,其特征在于,所述基于所述K个数据切片中每一个数据切片的初始大小,在所述K个数据切片中依次填入所述数据块,包括:

4.根据权利要求3所述的方法,其特征在于,所述基于所述第i个数据切片的剩余存储空间,以及所述P个数据块中未被填充至数据切片中的剩余数据块的大小,对所述第i个数据切片进行填充,包括:

5.根据权利要求3所述的方法,其特征在于,所述基于所述第i个数据切片...

【技术特征摘要】

1.一种数据存储方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述将所述p个数据块作为一个存储块,切分成预设的k个数据切片,包括:

3.根据权利要求2所述的方法,其特征在于,所述基于所述k个数据切片中每一个数据切片的初始大小,在所述k个数据切片中依次填入所述数据块,包括:

4.根据权利要求3所述的方法,其特征在于,所述基于所述第i个数据切片的剩余存储空间,以及所述p个数据块中未被填充至数据切片中的剩余数据块的大小,对所述第i个数据切片进行填充,包括:

5.根据权利要求3所述的方法,其特征在于,所述基于所述第i个数据切片的剩余空间,以及所述p个数据块中未被填充至数据切片中的剩余数据块的大小,对所述第i个数据切片进行填充,包括:

6.根据权利要求3所述的方法,其特征在于,所述基于所述第i个数据切片的剩余空间,以及所述p个数据块中未被填充至数据切片中的剩余数据块的大小,对所述第i个数据切片进行填充,包括:

7.根据权利要求3所述的方法,其特征在于,所述基于所述第i个数据切片的剩余空间,以及所述p个数据块中未被填充至数...

【专利技术属性】
技术研发人员:杨骥
申请(专利权)人:腾讯科技深圳有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1