一种实现数据处理的方法、装置、计算机存储介质及终端制造方法及图纸

技术编号:30702744 阅读:31 留言:0更新日期:2021-11-06 09:41
本文公开一种实现数据处理的方法、装置、计算机存储介质及终端,包括:确定写入名称空间的数据的写入方式;根据确定的写入方式的不同将数据写入到不同的物理块,并记录采用不同写入方式进行数据写入时数据写入的物理块信息;根据记录的物理块信息,对采用不同写入方式写入数据的物理块进行垃圾回收。本发明专利技术实施例在区分写入名称空间的数据的写入方式后,记录不同写入方式写入的物理块信息,根据记录的物理块信息进行垃圾回收,为提升垃圾回收效率和延长固态硬盘工作时长提供了数据基础;进一步的,先对随机写入的物理块进行垃圾回收,再对顺序写入的物理块进行垃圾回收,通过提升垃圾回收效率延长了固态硬盘工作时长。圾回收效率延长了固态硬盘工作时长。圾回收效率延长了固态硬盘工作时长。

【技术实现步骤摘要】
一种实现数据处理的方法、装置、计算机存储介质及终端


[0001]本文涉及但不限于测试技术,尤指一种实现数据处理的方法、装置、计算机存储介质及终端。

技术介绍

[0002]高速串行计算机扩展总线标准(PCIe)固态硬盘(SSD)的非易失性内存主机控制器接口规范(NVMe)协议支持名称空间(NAMESPACE)功能,每个NAMESPACE都是一个独立的块设备,在主机端表现为一个独立的硬盘设备,当前闪存转换层(FTL,Flash Translation Layer)算法对于主机下发的写命令都会写入同一物理块中,例如:写入NAMESPACE1和NAMESPACE2 的数据会被写入同一物理块中;写入不同NAMESPACE的数据可能会有不同的特征,比如:写入NAMESPACE1的是随机数据,写入NAMESPACE2的是顺序数据;按照当前FTL算法顺序数据和随机数据会被写入同一物理块中。

技术实现思路

[0003]以下是对本文详细描述的主题的概述。本概述并非是为了限制权利要求的保护范围。
[0004]本专利技术实施例提供一种实现数据处理的方法、装置、计算机存储介质及终端,能够提升垃圾回收效率,延长固态硬盘工作时长。
[0005]本专利技术实施例提供了一种实现数据处理的方法,包括:
[0006]确定写入名称空间的数据的写入方式;
[0007]根据确定的写入方式的不同将数据写入到不同的物理块,并记录采用不同写入方式进行数据写入时数据写入的物理块信息;
[0008]根据记录的物理块信息,对采用不同写入方式写入数据的物理块进行垃圾回收。
[0009]另一方面,本专利技术实施例还提供一种计算机存储介质,所述计算机存储介质中存储有计算机程序,所述计算机程序被处理器执行时实现上述实现数据处理的方法。
[0010]再一方面,本专利技术实施例还提供一种终端,包括:存储器和处理器,所述存储器中保存有计算机程序;其中,
[0011]处理器被配置为执行存储器中的计算机程序;
[0012]所述计算机程序被所述处理器执行时实现如上述实现数据处理的方法。
[0013]还一方面,本专利技术实施例还提供一种实现数据处理的装置,包括:确定写入方式单元、记录单元和垃圾回收单元;其中,
[0014]确定写入方式单元设置为:确定写入名称空间的数据的写入方式;
[0015]记录单元设置为:根据确定的写入方式的不同将数据写入到不同的物理块,并记录采用不同写入方式进行数据写入时数据写入的物理块信息;
[0016]垃圾回收单元设置为:根据记录的物理块信息,对采用不同写入方式写入数据的物理块进行垃圾回收。
[0017]本申请技术方案包括:确定写入名称空间的数据的写入方式;根据确定的写入方式的不同将数据写入到不同的物理块,并记录采用不同写入方式进行数据写入时数据写入的物理块信息;根据记录的物理块信息,对采用不同写入方式写入数据的物理块进行垃圾回收。本专利技术实施例在区分写入名称空间的数据的写入方式后,记录不同写入方式写入的物理块信息,根据记录的物理块信息进行垃圾回收,为提升垃圾回收效率和延长固态硬盘工作时长提供了数据基础;进一步的,先对随机写入的物理块进行垃圾回收,再对顺序写入的物理块进行垃圾回收,通过提升垃圾回收效率延长了固态硬盘工作时长。
[0018]本专利技术的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本专利技术而了解。本专利技术的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
附图说明
[0019]附图用来提供对本专利技术技术方案的进一步理解,并且构成说明书的一部分,与本申请的实施例一起用于解释本专利技术的技术方案,并不构成对本专利技术技术方案的限制。
[0020]图1为本专利技术实施例实现数据处理的方法的流程图;
[0021]图2为本专利技术实施例实现数据处理的装置的结构框图;
[0022]图3为本专利技术应用示例FTL算法的流程示意图。
具体实施方式
[0023]为使本专利技术的目的、技术方案和优点更加清楚明白,下文中将结合附图对本专利技术的实施例进行详细说明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互任意组合。
[0024]在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行。并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
[0025]本申请专利技术人分析发现,将顺序数据和随机数据写入同一物理块后,进行垃圾回收(GC)时,需要对物理块中的有效数据进行写回处理,GC处理效率低,影响SSD的写放大(WA)效率,造成SSD的使用寿命受影响。
[0026]图1为本专利技术实施例实现数据处理的方法的流程图,如图1所示,包括:
[0027]步骤101、确定写入名称空间(NAMESPACE)的数据的写入方式;
[0028]在一种示例性实例中,本专利技术实施例中的写入方式可以包括:顺序写入和随机写入。
[0029]步骤102、根据确定的写入方式的不同将数据写入到不同的物理块,并记录采用不同写入方式进行数据写入时数据写入的物理块信息;
[0030]本专利技术实施例确定写入方式不同时,数据写入的物理块不同,即写入方式不同的数据,不会写到同一个物理块中;例如、确定数据1采用顺序写入、数据2采用随机写入、数据3采用顺序写入和数据4采用随机写入,则本专利技术实施例方法若数据1写入物理块1时,则数据2将写入除物理块1以外的其他物理块,比如物理块2,数据3写入方式为顺序写入,在物理块1未写满时,数据3将被写入物理块1,同理,数据4将被写入物理块2。
[0031]步骤103、根据记录的物理块信息,对采用不同写入方式写入数据的物理块进行垃圾回收(GC)。
[0032]本专利技术实施例在区分写入名称空间的数据的写入方式后,记录不同写入方式写入的物理块信息,根据记录的物理块信息进行垃圾回收,为提升垃圾回收效率和延长固态硬盘工作时长提供了数据基础;进一步的,先对随机写入的物理块进行垃圾回收,再对顺序写入的物理块进行垃圾回收,通过提升垃圾回收效率延长了固态硬盘工作时长。
[0033]在一种示例性实例中,本专利技术实施例确定写入名称空间的数据的写入方式,包括:
[0034]根据数据的写命令确定写入方式。
[0035]在一种示例性实例中,本专利技术实施例写命令包括:来自执行数据写入的主机发送的命令。
[0036]在一种示例性实例中,本专利技术实施例根据数据的写命令确定写入方式,包括:
[0037]根据主机的当前写命令中的第一逻辑块地址(LBA)和在前一次写命令中的第二LBA,确定数据的写入方式。
[0038]在一种示例性实例中,本专利技术实施例确定数据的写入方式,包括:
[0039]将第一LBA中的第一写入起始地址减去第二LBA中的第二写入结束地址获得第一差值本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种实现数据处理的方法,包括:确定写入名称空间的数据的写入方式;根据确定的写入方式的不同将数据写入到不同的物理块,并记录采用不同写入方式进行数据写入时数据写入的物理块信息;根据记录的物理块信息,对采用不同写入方式写入数据的物理块进行垃圾回收。2.根据权利要求1所述的方法,其特征在于,所述确定写入名称空间的数据的写入方式,包括:根据所述数据的写命令确定所述写入方式。3.根据权利要求2所述的方法,其特征在于,所述根据所述数据的写命令确定所述写入方式,包括:根据当前写命令中的第一逻辑块地址LBA和在前一次写命令中的第二LBA,确定所述数据的所述写入方式。4.根据权利要求3所述的方法,其特征在于,所述确定数据的写入方式,包括:将所述第一LBA中的第一写入起始地址减去所述第二LBA中的第二写入结束地址获得第一差值;将所述第一LBA中的第一写入结束地址减去所述第二LBA中的第二写入起始地址获得第二差值;所述第一差值的绝对值或所述第二差值的绝对值小于预设标准阈值时,确定数据的所述写入方式为顺序写入;所述第一差值的绝对值和所述第二差值的绝对值均大于或等于所述预设标准阈值时,确定数据的所述写入方式为随机写入。5.根据权利要求2~4任一项所述的方法,其特征在于,所述根据确定的写入方式的不同将数据写入到不同的物理块,包括:根据确定的写入方式确定用于数据写入的物理块;判断所述用于数据写入的物理块是否已写满;判断出所述用于数据写入的物理块已写满时,从空闲队列中获取新的用于数据写入的物理块,并执行数据写入;判断出所述用于数据写入的物理块未写满时,直接在所述用于数...

【专利技术属性】
技术研发人员:张志王京阳张明吴莉莉
申请(专利权)人:合肥大唐存储科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1