一种元数据刷盘方法、装置、设备及介质制造方法及图纸

本申请公开了一种元数据刷盘方法、装置、设备及介质，包括：读取当前写缓存的水位；根据所述水位确定出下刷树目录数量以及下刷树的数据量阈值；从全部树目录中确定出所述下刷树目录数量个待下刷的目标树目录，以及利用所述数据量阈值从所述目标树目录中确定出待下刷的目标树；其中，所述目标树目录的数据量大于全部所述树目录中的其他所述树目录；将所述目标树中缓存的元数据下刷至固态硬盘。这样，利用写缓存的水位确定出对应的下刷树目录数量以及下刷树的数据量阈值，并在确定待下刷的目标树时考虑了树目录的数据量和树的数据量，能够及时的将写缓存中的数据下刷至固态硬盘，并避免每次下刷的数据量过小的问题，从而改善存储系统的性能。

【技术实现步骤摘要】
一种元数据刷盘方法、装置、设备及介质
本申请涉及存储
，特别涉及一种元数据刷盘方法、装置、设备及介质。
技术介绍
在全闪存储系统中，元数据的访问、修改一般具有随机性，因此，每次需要修改数据量很小，而SSD(即SolidStateDrive，固态硬盘)的特性要求按一定的块大小做追加写，如果每次修改的元数据量很小，不利于SSD盘性能的发挥和寿命。如何改善元数据的SSD盘写入是目前需要考虑的问题。
技术实现思路
有鉴于此，本申请的目的在于提供一种元数据刷盘方法、装置、设备及介质，能够及时的将写缓存中的数据下刷至固态硬盘，并避免每次下刷的数据量过小的问题，从而改善存储系统的性能。其具体方案如下：第一方面，本申请公开了一种元数据刷盘方法，应用于全闪存储系统，包括：读取当前写缓存的水位；根据所述水位确定出下刷树目录数量以及下刷树的数据量阈值；从全部树目录中确定出所述下刷树目录数量个待下刷的目标树目录，以及利用所述数据量阈值从所述目标树目录中确定出待下刷的目标树；其中，所述目标树目录的数据量大于全部所述树目录中的其他所述树目录；将所述目标树中缓存的元数据下刷至固态硬盘。可选的，还包括：在所述写缓存中根据所述元数据的类型和数据关系生成树目录以及在所述树目录中生成对应的树，以便将所述元数据缓存至对应的所述树中。可选的，所述根据所述水位确定出下刷树目录数量以及下刷树的数据量阈值，包括：若所述水位大于第一预设阈值并小于等于第二预设阈值，则确定所述下刷树目录数量为第一树目录数量，以及所述数据量阈值为第一数据量阈值。可选的，所述根据所述水位确定出下刷树目录数量以及下刷树的数据量阈值，包括：若所述水位大于第二预设阈值并小于等于第三预设阈值，则利用所述水位确定出对应的下刷比例，然后利用所述下刷比例确定出所述下刷树目录数量以及所述数据量阈值。可选的，所述根据所述水位确定出下刷树目录数量以及下刷树的数据量阈值，包括：若所述水位大于第三预设阈值，则确定所述下刷树目录数量为第二数树目录数量，所述数据量阈值为第二数据量阈值。可选的，还包括：若所述水位小于第一预设阈值，则禁止将所述写缓存中所述元数据下刷至所述固态硬盘，或，定时将符合预设条件的树目录中树缓存的所述元数据下刷至所述固态硬盘。可选的，所述从全部树目录中确定出所述下刷树目录数量个待下刷的目标树目录，包括利用小顶堆从全部树目录中确定出所述下刷树目录数量个待下刷的目标树目录。第二方面，本申请公开了一种元数据刷盘装置，应用于全闪存储系统，包括：缓存水位读取模块，用于读取当前写缓存的水位；下刷数量确定模块，用于根据所述水位确定出下刷树目录数量以及下刷树的数据量阈值；下刷目标确定模块，用于从全部树目录中确定出所述下刷树目录数量个待下刷的目标树目录，以及利用所述数据量阈值从所述目标树目录中确定出待下刷的目标树；其中，所述目标树目录的数据量大于全部所述树目录中的其他所述树目录；目标数据下刷模块，用于将所述目标树中缓存的元数据下刷至固态硬盘。第三方面，本申请公开了一种元数据刷盘设备，包括处理器和存储器；其中，所述存储器，用于保存计算机程序；所述处理器，用于执行所述计算机程序，以实现前述的元数据刷盘方法。第四方面，本申请公开了一种计算机可读存储介质，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现前述的元数据刷盘方法。可见，本申请先读取当前写缓存的水位，然后根据所述水位确定出下刷树目录数量以及下刷树的数据量阈值，以及从全部树目录中确定出所述下刷树目录数量个待下刷的目标树目录，以及利用所述数据量阈值从所述目标树目录中确定出待下刷的目标树；其中，所述目标树目录的数据量大于全部所述树目录中的其他所述树目录，最后将所述目标树中缓存的元数据下刷至固态硬盘。这样，利用写缓存的水位确定出对应的下刷树目录数量以及下刷树的数据量阈值，并在确定待下刷的目标树时考虑了树目录的数据量和树的数据量，能够及时的将写缓存中的数据下刷至固态硬盘，并避免每次下刷的数据量过小的问题，从而改善存储系统的性能。附图说明为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。图1为本申请公开的一种元数据刷盘方法流程图；图2为本申请公开的一种元数据按水位下刷示意图；图3为本申请公开的一种具体的元数据刷盘方法流程图；图4为本申请公开的一种元数据刷盘装置结构示意图；图5为本申请公开的一种元数据刷盘设备结构图。具体实施方式下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。参见图1所示，本申请实施例公开了一种元数据刷盘方法，应用于全闪存储系统，包括：步骤S11：读取当前写缓存的水位。步骤S12：根据所述水位确定出下刷树目录数量以及下刷树的数据量阈值。在具体的实施方式中，本实施例可以将元数据先存入写缓存对应的树中，然后根据写缓存的水位确定出对应的下刷策略，也即，根据写缓存的利用率确定出对应的下刷策略。若所述水位小于第一预设阈值，则禁止将所述写缓存中所述元数据下刷至所述固态硬盘，或，定时将符合预设条件的树目录中树缓存的所述元数据下刷至所述固态硬盘。也即，当前写缓存的利用率较低，比如第一预设阈值为35％，当前写缓存的水位小于35％，缓存中数据很少，可以不下刷，为了防止数据在缓存中长时间不下刷，可以定时检测一个树目录是否超过预设时间没有数据进入，如果超过预设时间，则将该树目录中树的数据下刷。若所述水位大于第一预设阈值并小于等于第二预设阈值，则确定所述下刷树目录数量为第一树目录数量，以及所述数据量阈值为第一数据量阈值。例如，当前水位大于35％小于等于75％，也即当前写缓存中的数据量不是很大，可以以非常缓慢的速度，比如每次只挑选一个数据量最大的树目录，从挑选出的树目录中的树中筛选出数据最多的树下刷，具体刷多少数据，可以根据总资源数确定当前水位可以下刷的数据量，然后进行刷盘。比如，trickle(缓慢下刷时用于确定下刷数据量的值)为1％，总资源数1w，则最终同时在下刷的数据量为1w*1％＝10。若所述水位大于第二预设阈值并小于等于第三预设阈值，则利用所述水位确定出对应的下刷比例，然后利用所述下刷比例确定出所述下刷树目录数量以及所述数据量阈值。例如，比如大于75％小于等于85％时，按线性增长方式刷盘，挑选的树目录数量线性增长，本文档来自技高网...

【技术保护点】
1.一种元数据刷盘方法，其特征在于，应用于全闪存储系统，包括：/n读取当前写缓存的水位；/n根据所述水位确定出下刷树目录数量以及下刷树的数据量阈值；/n从全部树目录中确定出所述下刷树目录数量个待下刷的目标树目录，以及利用所述数据量阈值从所述目标树目录中确定出待下刷的目标树；其中，所述目标树目录的数据量大于全部所述树目录中的其他所述树目录；/n将所述目标树中缓存的元数据下刷至固态硬盘。/n

【技术特征摘要】
1.一种元数据刷盘方法，其特征在于，应用于全闪存储系统，包括：
读取当前写缓存的水位；
根据所述水位确定出下刷树目录数量以及下刷树的数据量阈值；
从全部树目录中确定出所述下刷树目录数量个待下刷的目标树目录，以及利用所述数据量阈值从所述目标树目录中确定出待下刷的目标树；其中，所述目标树目录的数据量大于全部所述树目录中的其他所述树目录；
将所述目标树中缓存的元数据下刷至固态硬盘。


2.根据权利要求1所述的元数据刷盘方法，其特征在于，还包括：
在所述写缓存中根据所述元数据的类型和数据关系生成树目录以及在所述树目录中生成对应的树，以便将所述元数据缓存至对应的所述树中。


3.根据权利要求1所述的元数据刷盘方法，其特征在于，所述根据所述水位确定出下刷树目录数量以及下刷树的数据量阈值，包括：
若所述水位大于第一预设阈值并小于等于第二预设阈值，则确定所述下刷树目录数量为第一树目录数量，以及所述数据量阈值为第一数据量阈值。


4.根据权利要求1所述的元数据刷盘方法，其特征在于，所述根据所述水位确定出下刷树目录数量以及下刷树的数据量阈值，包括：
若所述水位大于第二预设阈值并小于等于第三预设阈值，则利用所述水位确定出对应的下刷比例，然后利用所述下刷比例确定出所述下刷树目录数量以及所述数据量阈值。


5.根据权利要求1所述的元数据刷盘方法，其特征在于，所述根据所述水位确定出下刷树目录数量以及下刷树的数据量阈值，包括：
若所述水位大于第三预设阈值，则确定所述下刷树目录数量为第二数树目录...

【专利技术属性】
技术研发人员：刘如意，孙京本，李佩，
申请(专利权)人：北京浪潮数据技术有限公司，
类型：发明
国别省市：北京;11