[发明专利]基于多级缓存的数据处理方法及系统

说明书

本申请实施例公开了一种基于多级缓存的数据处理方法，用于服务器中，其中，所述服务器包括第一级缓存和第二级缓存，所述第一级缓存包括多个第一类存储节点，所述第二级缓存包括多个第二类存储节点；所述数据处理方法包括：响应于读取请求，通过当前哈希环选择一个目标节点；判断所述目标节点是否是所述多个第一类存储节点中的任意一个；及若所述目标节点不是所述多个第一类存储节点中的任意一个，则从所述多个第二类存储节点中读取用于响应所述读取请求的响应数据，并返回所述响应数据。本申请实施例提供的技术方案，可以提高所述读取请求的响应速度和降低第一级缓存的压力。

技术领域

本申请涉及计算机技术领域，尤其涉及一种基于多级缓存的数据处理方法、系统、计算机设备和计算机可读存储介质。

背景技术

随着互联网和计算机技术的发展，数据规模越来越大。为应对大规模的数据写入或读取，人们开始使用多级缓存技术，将不同访问频次的数据存储在不同层级缓存中。鉴于访问频次、读写速度和存储设备成本等因素，不同层级缓存一般采用不同类型的存储设备。本发明人发现，当前多级缓存容易造成性能浪费。

发明内容

本申请实施例的目的是提供一种基于多级缓存的数据处理方法、系统、计算机设备及计算机可读存储介质，用于解决以下问题：当前多级缓存容易造成性能浪费。

本申请实施例的一个方面提供了一种基于多级缓存的数据处理方法，用于服务器中，其中，所述服务器包括第一级缓存和第二级缓存，所述第一级缓存包括多个第一类存储节点，所述第二级缓存包括多个第二类存储节点；所述数据处理方法包括：

响应于读取请求，通过当前哈希环选择一个目标节点；

判断所述目标节点是否是所述多个第一类存储节点中的任意一个；及

若所述目标节点不是所述多个第一类存储节点中的任意一个，则从所述多个第二类存储节点中读取用于响应所述读取请求的响应数据，并返回所述响应数据。

可选的，还包括：以预设频率更新所述当前哈希环。

可选的，所述当前哈希环为第一哈希环；

所述以预设频率更新所述当前哈希环，包括：

根据各个第一类存储节点的当前状态，将所述当前哈希环从所述第一哈希环更新为第二哈希环。

可选的，所述各个第一类存储节点的当前状态包括所述各个第一类存储节点的当前磁盘状态值；

所述根据各个第一类存储节点的当前状态，将所述当前哈希环从所述第一哈希环更新为第二哈希环，包括：

构造一个新哈希环；

根据所述新哈希环和所述各个第一类存储节点的当前磁盘状态值，生成所述第二哈希环；及

将所述当前哈希环从所述第一哈希环更新为所述第二哈希环。

可选的，所述获取所述各个第一类存储节点的当前磁盘状态值，包括：

根据所述各个第一类存储节点的IO队列和请求延时，获取所述各个第一类存储节点的当前磁盘状态值。

可选的，所述根据所述各个第一类存储节点的IO队列和请求延时，获取所述各个第一类存储节点的当前磁盘状态值，包括：

判断第i个存储节点的IO队列的数量是否大于第一预设值；其中，所述第i个存储节点为所述多个第一类存储节点中任意一个存储节点，1≤i≤M，i为整数，M为所述多个第一类存储节点的数量；

若所述第i个存储节点的IO队列的数量大于所述第一预设值，则对所述第i个存储节点的当前磁盘状态值自减1；

若所述第i个存储节点的IO队列的数量不大于所述第一预设值，则获取所述第i个存储节点的请求延时；