[发明专利]分离阈值调整方法、存储介质及程序产品在审
申请号: | 202210013270.0 | 申请日: | 2022-01-06 |
公开(公告)号: | CN114356866A | 公开(公告)日: | 2022-04-15 |
发明(设计)人: | 李晋忠;李钰 | 申请(专利权)人: | 阿里云计算有限公司 |
主分类号: | G06F16/172 | 分类号: | G06F16/172;G06F16/182 |
代理公司: | 北京合智同创知识产权代理有限公司 11545 | 代理人: | 李杰;张美洁 |
地址: | 310024 浙江省*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分离 阈值 调整 方法 存储 介质 程序 产品 | ||
本申请实施例提供了一种分离阈值调整方法、存储介质及程序产品,分离阈值调整方法,包括:获取当前键值分离存储过程中分离状态信息,其中,分离状态信息包括键存储区域中未被分离的值数据的大小信息、值存储区域中分离值数据的第一查询频率,其中,分离值数据为大于分离阈值的键值对被进行键值分离得到,第一查询频率根据查询分离值数据的查询次数与值数据被查询的总次数确定;根据未被分离的值数据的大小信息以及第一查询频率,调整分离阈值,以调整未被分离的值数据的大小,其中,查询键值对消耗的资源与第一查询频率成正比且与未被分离的值数据的大小信息成反比,第一查询频率与分离阈值成反比且与值数据被查询频率成正比。
技术领域
本申请实施例涉及数据存储技术领域,尤其涉及一种分离阈值调整方法、存储介质及程序产品。
背景技术
键值分离存储的方案中,可以利用键值分离将较大的值数据分离出来,极大地减少用于存储键的文件大小,从而极大地优化系统的写放大,提升系统的整体性能。因此,键值分离存储方案的应用越来越广泛。
一般情况下,键值分离存储中大都采用固定的键值分离条件,但这种键值分离条件难以适用于数据多变的计算场景。示例地,在流计算场景下,用于计算的数据会不断更新,且不同的数据的数据特点存在较大差异,同一个数据处理过程在不同时间段内的数据特点也可能差异很大。
发明内容
有鉴于此,本申请实施例提供一种分离阈值调整方案,以至少部分解决上述问题。
根据本申请实施例的第一方面,提供了一种分离阈值调整方法,包括:
获取当前键值分离存储过程的分离状态信息,其中,所述分离状态信息包括键存储区域中未被分离的值数据的大小信息、值存储区域中分离值数据的第一查询频率,其中,所述分离值数据为大于分离阈值的键值对被进行键值分离得到,所述第一查询频率根据查询所述分离值数据的查询次数与值数据被查询的总次数确定;
根据未被分离的值数据的大小信息以及所述第一查询频率,调整所述分离阈值,以调整未被分离的值数据的大小,其中,查询键值对消耗的资源与所述第一查询频率成正比且与所述未被分离的值数据的大小信息成反比,所述第一查询频率与所述分离阈值成反比且与值数据被查询频率成正比。
根据本申请实施例的第二方面,提供了一种分离阈值调整方法,包括:
获取当前键值分离存储过程的分离状态信息,其中,所述分离状态信息包括键存储区域中未被分离的值数据的大小信息、值存储区域中分离值数据的第一查询频率,其中,所述分离值数据为大于分离阈值的键值对被进行键值分离得到,所述第一查询频率根据查询所述分离值数据的查询次数与值数据被查询的总次数确定;
根据未被分离的值数据的大小信息以及所述第一查询频率,确定目标分离阈值,以调整未被分离的值数据的大小,其中,查询键值对消耗的资源与所述第一查询频率成正比且与所述未被分离的值数据的大小信息成反比,所述第一查询频率与所述分离阈值成反比且与值数据被查询频率成正比;
展示根据当前分离阈值进行键值分离存储后,查询键值对消耗的资源,以及与根据所述目标分离阈值进行键值分离存储后,查询键值对预计消耗的资源;
响应于阈值调整操作,将分离阈值调整为目标分离阈值。
根据本申请实施例的第三方面,提供了一种计算机存储介质,其上存储有计算机程序,该程序被处理器执行时实现如上所述的分离阈值调整方法。
根据本申请实施例的第五方面,提供了一种计算机程序产品,包括计算机指令,所述计算机指令指示计算设备执行如上所述的分离阈值调整方法对应的操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里云计算有限公司,未经阿里云计算有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210013270.0/2.html,转载请声明来源钻瓜专利网。