[发明专利]一种基于高并发的数据缓存方法

说明书

本发明公开了一种基于高并发的数据缓存方法，包括：将数据缓存分为多组不同路径分区，通过控制单元控制各组数据缓存模块，多个数据缓存同时进行数据写入，通过存储器管理模块进行管理，在相同周期内访问第一缓存块和第N缓存块；针对缓存块的数据带上专属标签，当缓存块的数据进入内核后，在内存中维护一个哈希表，将同一ID的哈希在同一个地方做请求合并，经过设定的时间后统一提交。本发明提出的缓存方法，同时进行数据的写入与读取，将多个数据缓存组合起来，分别配置不同的访问路径，通过访问不同的路径来访问数据缓存，通过遍历策略来调解缓存路径的变更，可以支持多个网络端口接收处理高并发情况下的任务，提高数据访问存取的正确性和速度。

技术领域

本发明内容涉及计算机技术领域，尤其涉及一种基于高并发的数据缓存方法。

背景技术

在互联网数据访问中，在对访问服务端进行查询输入等请求服务时，会频繁相关内容，将这些内容数据存储，在反复读取数据的过程中，影响数据访问的速度。通过在内存中建立缓存来减少数据访问次数，提高读写速度。现有技术中的数据采集过程中，经常遇到数据采集率高、速度快，而数据处理时间长，速度较慢的矛盾，当缓存容量大时，这种原始数据的速率较高，对网络接收和数据处理提出了较高的要求，每秒需要同时处理大量数据，若无法及时处理，一些短期使用的关键字长期在内存中存在，浪费内存，还会导致数据筛选有效性降低，不能保证得到准确的数据，影响精准性以及访问速度。

随着大规模云计算技术和Web应用的快速发展，数据存储数量和速度成指数倍增长，在空间利用率和并发执行效率上已无法满足日益增长的快速数据读写需求。现有技术中没有解决在数据加载在内存中和访问数据同时进行的问题，因此，对基于高并发情况的数据缓存优化成为目前亟待解决的问题。

发明内容

本发明内容所要解决的技术问题是针对背景技术中所涉及到的缺陷，提供一种基于高并发的数据缓存方法，解决了访问与加载缓存数据同时进行的高并发情况下，访问速度缓慢，且影响访问存取数据正确性的问题。

本发明内容的目的及解决的技术问题是采用以下技术方案来实现的：

一种基于高并发的数据缓存方法，包括：

1.将数据缓存分为多组不同路径分区，通过控制单元控制各组数据缓存模块，多个数据缓存同时进行数据写入，一组数据写入至相应数据缓存时，确定写入数据是否为存储请求的数据，所述写入数据为存储请求的数据时，上述缓存分区为第一缓存块，另划分出多个缓存块，为第二缓存块、第三缓存块至第N缓存块，其中N为另划分的缓存块数量减1，通过存储器管理模块进行管理，在相同周期内访问第一缓存块和所述第N缓存块；

2.对所述第一缓存块进行访问时，所述第二缓存块至第N缓存块处于空闲等待状态，在对第一缓存块进行访问的同时访问处于空闲等待状态的缓存块；

3.采取遍历的方式访问各缓存块，实时监控是否存在空闲等待状态的缓存分区，若有处于空闲状态的缓存分区，选定一组空闲状态的缓存分区置为写锁定状态；向所述写锁定状态的缓存分区写入该组数据，判断所述数据是否写入成功：若写入成功，则该组数据写入完成，结束本次数据写入；若没有处于空闲状态的缓存分区，则结束该组数据写入；

4.针对缓存块的数据带上专属标签，当缓存块的数据进入内核后，在内存中维护一个哈希表，将同一ID的哈希在同一个地方做请求合并，经过设定的时间后统一提交，防止并发数据缓存处理发生问题。

优选的，当第一缓存块数据为写满状态时进行读锁定，仅支持数据读取，此时将需要写入的数据缓存至空闲等待状态的第二缓存块，所述第二缓存块的状态变为访问状态，所述第一缓存块数据读取完成后，处于空闲等待状态，所述第一缓存块数据缓存区无数据。

优选的，当第一缓存块数据为写满状态时进行读锁定，仅支持数据读取，此时将需要写入的数据缓存至空闲等待状态的第N缓存块，所述第N缓存块的状态变为访问状态，所述第一缓存块数据读取完成后，处于空闲等待状态，所述第一缓存块数据缓存区无数据。