[发明专利]数据缓存方法、数据处理方法、系统、设备及存储介质

说明书

本发明涉及一种数据缓存方法、数据处理方法、系统、设备及存储介质，其技术方案要点是：获取请求数据，请求数据是针对应用的任一用户请求所采集到的用户请求数据，其中，请求数据包括：关键字；获取在统计周期内的各个关键字的请求次数，根据各个关键字的请求次数得到该各个关键字的热度；根据所有关键字的热度对所有结果数据进行排序确定至少一热点数据，结果数据是存储在Redis数据库中的与关键字具有映射关系的数据；将所有热点数据同步到应用的本地缓存形成本地第一缓存；将Redis数据库中的所有结果数据读取到应用的本地缓存形成本地第二缓存；本申请具有缓解Redis数据库的压力，提高系统的并发能力和稳定性的效果。

技术领域

本发明涉及互联网技术领域，更具体地说，它涉及一种数据缓存方法、数据处理方法、系统、设备及存储介质。

背景技术

在当今的互联网时代，信息的传播是非常迅速的，比如一些热点新闻会在互联网中快速传播。

现有的互联网架构都会对数据进行分片，面对这种读多写少的场景，服务端对数据的大量访问会集中在某一服务器上。由于流量的过度集中很容易就会超过缓存极限，就会导致缓存崩溃。当缓存崩溃后，此时请求就会去到数据库，由于数据库本身性能比较脆弱，在面临大量请求时很容易出现雪崩现象，严重影响系统的稳定性和高可用性。

发明内容

针对现有技术存在的不足，本发明的目的在于提供一种数据缓存方法、数据处理方法、系统、设备及存储介质，具有缓解Redis数据库的压力，提高系统的并发能力和稳定性的功能优点。

本发明的上述技术目的是通过以下技术方案得以实现的：

第一方面，本申请提供了一种数据缓存方法，包括：

获取请求数据，所述请求数据是针对应用的任一用户请求所采集到的用户请求数据，其中，所述请求数据包括：关键字；

获取在统计周期内的各个关键字的请求次数，根据各个所述关键字的请求次数得到该各个关键字的热度；

根据所有所述关键字的热度对所有结果数据进行排序确定至少一热点数据，所述结果数据是存储在Redis数据库中的与关键字具有映射关系的数据；

将所有所述热点数据同步到所述应用的本地缓存形成本地第一缓存；

将所述Redis数据库中的所有结果数据读取到所述应用的本地缓存形成本地第二缓存。

可选的，所述用户请求数据的采集方法包括：

在所述用户请求触发对所述应用中关键函数的调用情况下，执行预先添加在所述关键函数的调用处的数据采集代码，以采集所述用户请求数据，其中，所述数据采集代码是基于切面编程AOP进行添加的。

可选的，所述获取在统计周期内的各个关键字的请求次数，根据各个所述关键字的请求次数得到该各个关键字的热度，包括：

采用流式计算方式统计所述统计周期内的各个关键字的请求次数；

将各个所述关键字的请求次数作为该各个关键字的热度。

可选的，所述根据所有所述关键字的热度对所有结果数据进行排序确定至少一热点数据，包括：

根据所有所述关键字的热度的高低对所有结果数据进行排序得到有序集合；

选取所述有序集合中的排序靠前的预设数量的结果数据确定至少一热点数据。

可选的，所述本地第二缓存为采用LRU替换算法的缓存。

第二方面，本申请还提供了一种基于上述的数据缓存方法的数据处理方法，包括：

接收所述用户请求；