[发明专利]数据缓存方法、系统、存储介质及设备在审
申请号: | 202011356737.9 | 申请日: | 2020-11-27 |
公开(公告)号: | CN112487326A | 公开(公告)日: | 2021-03-12 |
发明(设计)人: | 陈晓丽;范渊;刘博 | 申请(专利权)人: | 杭州安恒信息技术股份有限公司 |
主分类号: | G06F16/957 | 分类号: | G06F16/957;G06F16/958 |
代理公司: | 杭州华进联浙知识产权代理有限公司 33250 | 代理人: | 贺才杰 |
地址: | 310051 浙江省*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 缓存 方法 系统 存储 介质 设备 | ||
本申请涉及一种数据缓存方法、系统、存储介质及设备,该方法包括:统计访问词在预设时间间隔的后台服务器访问量;当访问词的访问量达到第一预设阈值时,标记访问词标记为热点词,调取热点词对应的内容数据;将内容数据由redis存储端缓存至客户端;当热点词的预设的时间后台服务器访问量低于第一预设值时,标记热点词为温点词;当温点词的预设的时间后台服务器访问量低于第二预设值时,清除客户端对应的内容数据。通过本申请,合理分配利用redis存储端的缓存空间,提升了数据查询的响应效率和查询系统稳定性。
技术领域
本发明涉及数据处理技术领域,特别涉及一种数据缓存方法、系统、存储介质及设备。
背景技术
随着互联网的发展,大量网络应用产生了海量的数据,为了提高查询效率,同时为避免直接与数据库操作而出现系统瓶颈,通常将数据放入redis存储端。
redis存储端上缓存的热点数据,可能存在70%以上的数据量在一段固定时间之内,仅被30%的访问请求,剩余百分之30%承受着70%的访问请求,甚至可能存在1%的数据在某段固定的时间承受着90%的访问请求,为了这某段固定时间点急剧产生的访问需求,会有存在以下几类潜在的风险;(1)在某段固定时间点急剧产生对某一小部分缓存数据的急剧访问需求,假设当前缓存数据失效,大批量的请求直接打到数据库上,导致整个系统奔溃,即使做了双端加锁,在数据库中获取新的缓存数据,也将会有一大批访问请求阻塞并请求超时;(2)假设缓存系统稳定的情况下,大批请求直接被缓存命中,假设对于单个服务而言,访问redis存储端的请求量超过了redis存储端的连接池资源,会对当前应用访问redis存储端其他请求造成访问失败或其他未知问题;(3)假设缓存系统稳定的情况下,大批请求直接被缓存命中,对于redis存储端集群服务而言,可能需要去衡量访问请求量,假设超过了当前集群能够承受的量,可能导致缓存集群服务的不稳定。
发明内容
基于此,本发明的目的是提供一种数据缓存方法、系统、存储介质及设备,合理分配利用redis存储端的缓存空间,提升了数据查询的响应效率和查询系统稳定性。
本发明提供一种数据缓存方法,所述方法包括:
统计访问词在预设时间间隔的后台服务器访问量;
当所述访问词的访问量达到第一预设阈值时,标记所述访问词为热点词,调取所述热点词对应的内容数据;
将所述内容数据由redis存储端缓存至客户端;
当所述热点词的预设的时间内后台服务器访问量低于第一预设值时,标记所述热点词为温点词;
当所述温点词的预设的时间内后台服务器访问量低于第二预设值时,清除所述客户端对应的所述内容数据。
本发明提供的数据缓存方法,可在预设时间间隔循环统计访问词并确定访问词中的热点词,将热点词对应的内容数据(即热点数据)从redis存储端缓存至客户端,使得redis存储端的存储空间始终相对稳定,避免了大批量访问请求导致redis存储端瘫痪的情况,克服了当在大批访问请求直接被缓存命中,访问redis存储端的请求量超过了redis存储端的连接池资源,会对当前应用访问redis存储端其他请求造成访问失败的问题。
同时,当热点词的访问量下降到设定值(即第二预设值)时,将清除客户端对应的所述内容数据,也确保了客户端缓存的及时清理,使得客户端的缓存空间可以合理分配利用,保证了其正常的运行。
进一步的,所述统计访问词在预设时间间隔的后台服务器访问量的步骤包括:
获取所有客户端的访问请求记录,所述访问请求记录包括访问时间、访问地址、访问词;
根据原子递增方法统计预设时间间隔每个访问词的访问量。
进一步的,所述将所述内容数据由redis存储端缓存至客户端的步骤之后还包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州安恒信息技术股份有限公司,未经杭州安恒信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011356737.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种卧式直压液态模锻铸造机
- 下一篇:一种纯钛表面双层防护膜层的制备方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置