分离阈值调整方法、存储介质及程序产品技术

本申请实施例提供了一种分离阈值调整方法、存储介质及程序产品，分离阈值调整方法，包括：获取当前键值分离存储过程中分离状态信息，其中，分离状态信息包括键存储区域中未被分离的值数据的大小信息、值存储区域中分离值数据的第一查询频率，其中，分离值数据为大于分离阈值的键值对被进行键值分离得到，第一查询频率根据查询分离值数据的查询次数与值数据被查询的总次数确定；根据未被分离的值数据的大小信息以及第一查询频率，调整分离阈值，以调整未被分离的值数据的大小，其中，查询键值对消耗的资源与第一查询频率成正比且与未被分离的值数据的大小信息成反比，第一查询频率与分离阈值成反比且与值数据被查询频率成正比。正比。正比。

【技术实现步骤摘要】
分离阈值调整方法、存储介质及程序产品


[0001]本申请实施例涉及数据存储
，尤其涉及一种分离阈值调整方法、存储介质及程序产品。

技术介绍

[0002]键值分离存储的方案中，可以利用键值分离将较大的值数据分离出来，极大地减少用于存储键的文件大小，从而极大地优化系统的写放大，提升系统的整体性能。因此，键值分离存储方案的应用越来越广泛。
[0003]一般情况下，键值分离存储中大都采用固定的键值分离条件，但这种键值分离条件难以适用于数据多变的计算场景。示例地，在流计算场景下，用于计算的数据会不断更新，且不同的数据的数据特点存在较大差异，同一个数据处理过程在不同时间段内的数据特点也可能差异很大。

技术实现思路

[0004]有鉴于此，本申请实施例提供一种分离阈值调整方案，以至少部分解决上述问题。
[0005]根据本申请实施例的第一方面，提供了一种分离阈值调整方法，包括：
[0006]获取当前键值分离存储过程的分离状态信息，其中，所述分离状态信息包括键存储区域中未被分离的值数据的大小信息、值存储区域中分离值数据本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种分离阈值调整方法，包括：获取当前键值分离存储过程中分离状态信息，其中，所述分离状态信息包括键存储区域中未被分离的值数据的大小信息、值存储区域中分离值数据的第一查询频率，其中，所述分离值数据为大于分离阈值的键值对被进行键值分离得到，所述第一查询频率根据查询所述分离值数据的查询次数与值数据被查询的总次数确定；根据未被分离的值数据的大小信息以及所述第一查询频率，调整所述分离阈值，以调整未被分离的值数据的大小，其中，查询键值对消耗的资源与所述第一查询频率成正比且与所述未被分离的值数据的大小信息成反比，所述第一查询频率与所述分离阈值成反比且与值数据被查询频率成正比。2.根据权利要求1所述的方法，其中，所述根据未被分离的值数据的大小信息以及所述第一查询频率，调整所述分离阈值，包括：根据未被分离的值数据的大小信息、所述第一查询频率以及在值存储区域中进行单次键值对查询耗费的资源，计算得到阈值调整比例；根据所述阈值调整比例以及当前分离阈值确定作为调整目标的目标分离阈值；将当前分离阈值调整为所述目标分离阈值。3.根据权利要求2所述的方法，其中，所述第一查询频率通过下述方式确定：确定查询值数据的第二查询频率，以及确定查询值存储区域中的分离值数据的第三查询频率；根据所述第二查询频率和所述第三查询频率的差值确定所述第一查询频率。4.根据权利要求3所述的方法，其中，所述目标分离阈值通过下述公式确定：其中，M为在值存储区域中进行单次查询耗费的资源,β为定值，p为所述第二查询频率，a为所述第三查询频率，p
‑
a为所述第一查询频率，Vs为所述未被分离的值数据的总大小。5.根据权利要求1所述的方法，其中，所述获取当前键值分离存储过程的分离状态信息，包括：获取分离值数据的大小信息，所述分离值数据的大小信息与未被分离的值数据的大小信息成反比；获取所述分离值数据的第三查询频率，所述第三查询频率与所述第一查询频率成反比；所述根据未被分离的值数据的大小信息以及所述第一查询频率，调整所述分离阈值，包括：获取与所述分离值数据的大小信息对应的查询频率阈值范围；若所述第三查询频率与所述查询频率阈值范围不匹配，则调整所述分离阈值，以调整进行键值分离存储的键值对的比例，其中，键值分离存储的键值对的比例与第三查询频率...

【专利技术属性】
技术研发人员：李晋忠，李钰，
申请(专利权)人：阿里云计算有限公司，
类型：发明
国别省市：