小文件数据的处理方法、装置、电子设备及存储介质制造方法及图纸

本公开涉及一种小文件数据的处理方法、装置、电子设备及存储介质，该方法包括：获取目标文件的访问信息，访问信息中包含预设周期内目标文件的被访问次数，目标文件的数据大小小于预设大小阈值；基于被访问次数确定目标文件的数据等级，被访问次数越高，目标文件的数据等级越高；根据数据等级确定目标存储区域，将目标文件迁移至目标存储区域，数据等级越高，对应的目标存储区域的读写性能越高。本公开通过利用目标文件的被访问次数来确定目标文件的数据等级，使被访问次数越高的目标文件确定的数据等级越高，然后让数据等级越高的目标文件迁移到读写性能越高的存储区域，从而提高小文件的整体读写效率。

【技术实现步骤摘要】

本公开涉及数据处理，具体涉及一种小文件数据的处理方法、装置、电子设备及存储介质。

技术介绍

1、随着互联网的不断普及与发展，数据呈现爆炸式增长，社交网络、电子商务等各种应用往往能产生亿级、十亿级甚至是百亿级的小文件，小文件通常是指大小在1mb以内的文件，海量增加的小文件影响了硬盘的使用性能。

2、在只采用简单文件系统的操作系统中，不同存储区的读写性能不同，且通常来说读写性能越高的存储区其存储容量越小，例如缓存区的读写性能比磁盘区高，但缓存区的存储容量比磁盘区小，这种情况下，文件系统没有对小文件的存储进行有效的数据布局，让小文件随机存储可能造成被访问次数不多的小文件占据了拥有高读写性能的存储区，反而被访问次数更多的小文件处于读写性能更低的存储区，影响小文件的读写效率。

技术实现思路

1、为了解决上述技术问题，本公开提供了一种小文件数据的处理方法、装置、电子设备及存储介质。

2、第一方面，本公开提供了一种小文件数据的处理方法，包括：

3、获取目标文件的访问信息，所述访问信息中包本文档来自技高网...

【技术保护点】

1.一种小文件数据的处理方法，其特征在于，包括：

2.如权利要求1所述的方法，其特征在于，所述获取目标文件的访问信息之前，还包括：

3.如权利要求1所述的方法，其特征在于，所述数据等级包括第一数据等级、第二数据等级和第三数据等级；

4.如权利要求3所述的方法，其特征在于，所述目标存储区域包括虚拟内存盘、缓存区和磁盘区；

5.如权利要求4所述的方法，其特征在于，所述将所述目标文件迁移至目标存储区域，包括：

6.一种小文件数据的处理装置，其特征在于，包括：

7.如权利要求6所述的装置，其特征在于，所述装置还包括记录模块，...

【技术特征摘要】

1.一种小文件数据的处理方法，其特征在于，包括：

2.如权利要求1所述的方法，其特征在于，所述获取目标文件的访问信息之前，还包括：

3.如权利要求1所述的方法，其特征在于，所述数据等级包括第一数据等级、第二数据等级和第三数据等级；

4.如权利要求3所述的方法，其特征在于，所述目标存储区域包括虚拟内存盘、缓存区和磁盘区；

5.如权利要求4所述的方法，其特征在于，所述将所述目标文件迁移至目标存储区域，包括：

6.一种小文件数据的处理装置，其特征在于，包括：

7.如权利要求6所述的装置，其特征在于，所述装置还包括记录模块，用于在所述获取目标文件的访问信息之前，记录预设周期内所述...

【专利技术属性】
技术研发人员：韩小虎，
申请(专利权)人：北京罗克维尔斯科技有限公司，
类型：发明
国别省市：