[发明专利]一种海量数据的检索方法及装置

说明书

本发明公开了一种海量数据的检索方法，包括：在不同区域建立第一缓存，第二缓存和第三缓存；接收数据检索请求；根据所述检索请求查找所要检索的数据的存储区域；若查找成功，在查找获得的存储区域进行数据检索；若查找失败，根据所述检索请求和缓存所属设备的性能在第一缓存，第二缓存和第三缓存中进行数据检索；若在第一缓存和第二缓存和第三缓存中数据检索失败，则根据所述检索请求在数据库中进行数据检索。解决现有检索技术效率低的问题。

技术领域

本申请涉及数据检索领域，具体涉及一种海量数据的检索方法，同时涉及一种海量数据的检索装置。

背景技术

数据检索是查询数据的常规方式。其实质就是将某些数据资源存储于数据库中，当用户查询自己所需的数据资源时，用户输入检索数据进行检索。然后通过检索数据与数据库中的数据资源进行匹配，将匹配成功数据资源返回给用户，从而完成数据检索过程。然而现有数据检索过中，由于数据库中的数据量过大，采用现有的检索方式进行检索，其整个过程将耗费大量的时间。

发明内容

为解决现有检索技术效率低的问题，本申请提供一种海量数据的检索方法，包括：

在不同区域建立第一缓存，第二缓存和第三缓存；

接收数据检索请求；根据所述检索请求查找所要检索的数据的存储区域；若查找成功，在查找获得的存储区域进行数据检索；

若查找失败，根据所述检索请求和缓存所属设备的性能在第一缓存，第二缓存和第三缓存中进行数据检索；若在第一缓存和第二缓存和第三缓存中数据检索失败，则根据所述检索请求在数据库中进行数据检索。

优选的，在不同区域建立第一缓存，第二缓存和第三缓存，包括：

在产生数据会话的线程变量中建立第一缓存，第一缓存用于存储历史检索数据结果；

在REDIS中建立第二缓存，第二缓存用于存储频繁使用的告警信息，告警规则，告警内容和告警历史数据；

在内存中建立第三缓存，第三缓存用于存储热数据。

优选的，根据所述检索请求和缓存所属设备的性能在第一缓存，第二缓存和第三缓存中进行数据检索，包括：

若确定所要检索的数据不存在于第一缓存，第二缓存和第三缓存中的任意一个缓存时，则对剩余的两个缓存进行数据检索；

若不能确定所要检索的数据不存在于第一缓存，第二缓存和第三缓存中的任意一个缓存时，且缓存所属设备的性能低于预设的阈值时，则分别在第一缓存和第二缓存和第三缓存中同时进行数据检索；

若缓存所属设备的性能高于预设阈值时，则依次在第一缓存，第二缓存和第三结存中进行数据检索。

优选的，依次在第一缓存，第二缓存和第三结存中进行数据检索，包括：

根据所述检索请求，在第一缓存中进行数据检索；

若在第一缓存中检索失败，且所述检索请求为文本检索时，则在第二缓存中进行文本检索；

若在第一缓存中检索失败，且所述检索请求为非文本检索时，则在第三缓存中进行数据检索；

若文本检索失败或在第三缓存中数据检索失败时，则在第二缓存中进行数据检索。

优选的，在根据所述检索请求和缓存所属设备的性能在第一缓存，第二缓存和第三缓存中进行数据检索的步骤之后，还包括：

若在第一缓存和第二缓存和第三缓存中数据检索成功，则结束数据检索。

本申请同时提供一种海量数据的检索装置，包括：

缓存构建模块，在不同区域建立第一缓存，第二缓存和第三缓存；