[发明专利]一种缓存池数据下刷方法、系统、电子设备及存储介质在审
申请号: | 202110779568.8 | 申请日: | 2021-07-09 |
公开(公告)号: | CN113672523A | 公开(公告)日: | 2021-11-19 |
发明(设计)人: | 李吉龙;谢有权 | 申请(专利权)人: | 济南浪潮数据技术有限公司 |
主分类号: | G06F12/0802 | 分类号: | G06F12/0802;G06F9/50 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 杨威 |
地址: | 250101 山东省济南市自由贸易试验区*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 缓存 数据 方法 系统 电子设备 存储 介质 | ||
1.一种缓存池数据下刷方法,其特征在于,包括:
确定缓存池的下刷水位和数据池的业务压力;其中,所述缓存池用于存储热点数据,所述数据池用于存储客户端和所述缓存池下刷的非热点数据,所述热点数据的访问频率大于所述非热点数据的访问频率;
根据所述下刷水位和所述业务压力确定下刷速度;其中,所述下刷速度与所述下刷水位正相关,所述下刷速度与所述业务压力负相关;
按照所述下刷速度将所述缓存池中的非热点数据下刷至所述数据池。
2.根据权利要求1所述缓存池数据下刷方法,其特征在于,按照所述下刷速度将所述缓存池中的非热点数据下刷至所述数据池,包括:
根据所述下刷速度设置可用线程总数和剩余同时下刷字节数;
按照预设规则调用下刷线程将所述缓存池中的非热点数据下刷至所述数据池;
其中,所述预设规则包括:每一下刷线程被调用时,所述可用线程总数减1,所述剩余同时下刷字节数减去被调用的下刷线程对应的下刷字节数;每一下刷线程被调用结束时,所述可用线程总数加1,所述剩余同时下刷字节数加上被调用结束的下刷线程对应的下刷字节数;当所述可用线程总数和/或所述剩余同时下刷字节数为0时,暂停所述述缓存池中的非热点数据的下刷操作。
3.根据权利要求1所述缓存池数据下刷方法,其特征在于,所述确定缓存池的下刷水位和数据池的业务压力,包括:
根据所述缓存池中已使用空间占缓存池空间总量的比值确定所述下刷水位;
接收所述数据池上报的所述业务压力;其中,所述业务压力根据所述数据池中的资源参数确定;所述资源参数包括每一周期的平均数据处理大小、平均时延、平均服务时间、平均IO次数和平均带宽中的任一项或任几项的组合。
4.根据权利要求3所述缓存池数据下刷方法,其特征在于,接收所述数据池上报的所述业务压力,包括:
向所述数据池发送压力查询请求,以便所述数据池执行压力识别操作将数据池压力识别结果返回至所述缓存池;
根据所述数据池压力识别结果确定所述业务压力。
5.根据权利要求3所述缓存池数据下刷方法,其特征在于,接收所述数据池上报的所述业务压力,包括:
根据所述数据池发送的回复消息确定业务压力;其中,当所述数据池接收到所述缓存池下刷的数据时,所述数据池根据数据池压力识别结果构建所述回复消息,并所述回复消息发送至所述缓存池。
6.根据权利要求5所述缓存池数据下刷方法,其特征在于,还包括:
在所述数据池第一次向所述缓存池下刷非热点数据时,根据所述下刷水位确定临时下刷速度,并按照所述临时下刷速度向所述缓存池下刷非热点数据。
7.根据权利要求1至6任一项所述缓存池数据下刷方法,其特征在于,所述缓存池的存储介质为固态硬盘,所述数据池的存储介质为机械硬盘。
8.一种缓存池数据下刷系统,其特征在于,包括:
参数确定模块,用于确定缓存池的下刷水位和数据池的业务压力;其中,所述缓存池用于存储热点数据,所述数据池用于存储客户端和所述缓存池下刷的非热点数据,所述热点数据的访问频率大于所述非热点数据的访问频率;
下刷速度确定模块,用于根据所述下刷水位和所述业务压力确定下刷速度;其中,所述下刷速度与所述下刷水位正相关,所述下刷速度与所述业务压力负相关;
数据下刷模块,用于按照所述下刷速度将所述缓存池中的非热点数据下刷至所述数据池。
9.一种电子设备,其特征在于,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器调用所述存储器中的计算机程序时实现如权利要求1至7任一项所述缓存池数据下刷方法的步骤。
10.一种存储介质,其特征在于,所述存储介质中存储有计算机可执行指令,所述计算机可执行指令被处理器加载并执行时,实现如权利要求1至7任一项所述缓存池数据下刷方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮数据技术有限公司,未经济南浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110779568.8/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置