数据处理方法、装置及存储介质制造方法及图纸

本公开是关于一种数据处理方法、装置及存储介质。数据处理方法包括：获取待存储数据，并将所述待存储数据存储至存储系统的可读写高速存储后端；在可读写高速存储后端的已存储数据中确定待转存数据；将所述待转存数据转存至所述存储系统的只读存储后端。通过本公开可以提升数据存储效率。提升数据存储效率。提升数据存储效率。

【技术实现步骤摘要】
数据处理方法、装置及存储介质


[0001]本公开涉及数据处理
，尤其涉及一种数据处理方法、装置及存储介质。

技术介绍

[0002]目前，可读写高速存储后端和只读存储后端是常见的数据存储单元，可以用于数据的存储与读取。其中，可读写高速存储后端通常指以固态硬盘为代表的主要基于集成电路制作的存储器，其数据存储速度较快，但容量较小。只读存储后端通常指以机械硬盘为代表的旋转盘片为基础的非易失性存储器，其容量较大，但数据存储速度较慢。
[0003]相关技术中，通常采用可读写高速存储后端与只读存储后端相结合的方式进行数据的存储及读取。相关技术中的数据处理方法，数据存储效率较低，无法满足用户的需求。

技术实现思路

[0004]为克服相关技术中存在的问题，本公开提供一种数据处理方法、装置及存储介质。
[0005]根据本公开实施例的第一方面，提供一种数据处理方法，包括：
[0006]获取待存储数据，并将所述待存储数据存储至存储系统的可读写高速存储后端；在可读写高速存储后端的已存储数据中确定待转存数据；将所述待转存数据转本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法，其特征在于，所述方法包括：获取待存储数据，并将所述待存储数据存储至存储系统的可读写高速存储后端；在可读写高速存储后端的已存储数据中确定待转存数据；将所述待转存数据转存至所述存储系统的只读存储后端。2.根据权利要求1所述的数据处理方法，其特征在于，将所述待存储数据存储至存储系统的可读写高速存储后端，包括：确定所述待存储数据所属的存储桶；响应于所述存储系统的可读写高速存储后端中已存在第一目标数据，所述第一目标数据所属存储桶与所述待存储数据所属存储桶相同，将所述待存储数据与所述第一目标数据整合为同一数据段存储至所述存储系统的可读写高速存储后端。3.根据权利要求2所述的数据处理方法，其特征在于，在可读写高速存储后端的已存储数据中确定待转存数据，包括：确定所述存储系统的可读写高速存储后端所存储的数据段，并通过所述数据段，得到转存至所述存储系统的只读存储后端的待转存数据。4.根据权利要求1或3所述的数据处理方法，其特征在于，将所述待转存数据转存至所述存储系统的只读存储后端之前，所述方法还包括：确定可读写高速存储后端已存储数据的数量达到目标数量阈值，和/或确定可读写高速存储后端已存储数据中存在有数据大小达到目标大小阈值的数据。5.根据权利要求1所述的数据处理方法，其特征在于，将所述待转存数据转存至所述存储系统的只读存储后端，包括：确定所述待转存数据所属的存储桶；响应于所述存储系统的只读存储后端中已存在第二目标数据，所述第二目标数据所属存储桶与所述待转存数据所属存储桶相同，将所述待转存数据与所述第二目标数据整合为同一数据段存储至所述存储系统的只读存储后端。6.根据权利要求2或5所述的数据处理方法，其特征在于，采用如下方式将指定数据与指定待转存数据整合为同一数据段存储所述存储系统的指定存储后端，其中，所述指定数据包括待存储数据，所述指定待转存数据包括第一目标数据，所述指定存储后端包括可读写高速存储后端，或，所述指定数据包括待转存数据，所述指定待转存数据包括第二目标数据，所述指定存储后端包括只读存储后端：将所述指定数据存储于所述指定存储后端的第一存储地址，以及将所述指定待转存数据存储于所述指定存储后端的第二存储地址，所述第一存储地址与所述第二存储地址之间的存储地址差异度小于第一差异度阈值。7.根据权...

【专利技术属性】
技术研发人员：胡瑞坤，
申请(专利权)人：北京迈格威科技有限公司，
类型：发明
国别省市：