[发明专利]一种搜索引擎的索引数据加载方法和装置

说明书

本发明提供了一种搜索引擎的索引数据加载方法和装置，方法包括：获取输入搜索引擎的第一关键词；查询第一缓存空间是否存在第一关键词对应的第一类索引数据；如果否，查询第一内存空间是否存在第一关键词对应的压缩第一类索引数据；第一内存空间存储压缩第一类索引数据；当第一内存空间存在第一关键词对应的压缩第一类索引数据时，对第一关键词对应的压缩第一类索引数据进行解压缩，并将解压缩后的第一类索引数据加载到第一缓存空间；返回第一关键词对应的第一类索引数据。本发明可以在不影响搜索体验的情况下，节省内存资源，并可以在占用相同内存资源情况下，提高搜索响应时间。

技术领域

本发明涉及互联网技术领域，特别是涉及一种搜索引擎的索引数据加载方法和一种搜索引擎的索引数据加载装置。

背景技术

随着互联网技术的发展，搜索引擎的搜索功能成为网站的一个必备功能。搜索引擎所处理的数据量越来越多，索引数据量也在不断增长，大数据背景下对搜索引擎不断提出挑战。搜索引擎进行搜索时，需保证搜索体验不断提高的同时减小包括CPU、内存等计算资源的消耗。

为了保证搜索体验，一般搜索引擎将索引数据先直接加载到内存，而不是采用网络数据库的方式获取索引数据，目的是排序算法能够直接使用内存中的索引数据，以最快的速度对用户搜索做出响应。

但是，搜索引擎中索引数据量很大，并且索引数据量随着时间不断增长，而物理机的内存资源有限，如果将索引数据直接展开成排序算法所需数据，将会占用大量的内存。另外，如果内存加载压缩的索引数据，在需要时对压缩的索引数据进行解压，则会严重影响搜索的响应时间，从而影响用户搜索体验。

发明内容

鉴于上述问题，提出了本发明实施例以便提供克服上述问题或者至少部分地解决上述问题的一种搜索引擎的索引数据加载方法和相应的一种搜索引擎的索引数据加载装置。

为了解决上述问题，本发明实施例公开了一种搜索引擎的索引数据加载方法，包括：获取输入搜索引擎的第一关键词；查询第一缓存空间是否存在所述第一关键词对应的第一类索引数据；如果否，查询第一内存空间是否存在所述第一关键词对应的压缩第一类索引数据；所述第一内存空间存储压缩第一类索引数据；当所述第一内存空间存在所述第一关键词对应的压缩第一类索引数据时，对所述第一关键词对应的压缩第一类索引数据进行解压缩，并将解压缩后的第一类索引数据加载到所述第一缓存空间；返回所述第一关键词对应的第一类索引数据。

为了解决上述问题，本发明实施例还公开了一种搜索引擎的索引数据加载装置，包括：关键词获取模块，用于获取输入搜索引擎的第一关键词；第一查询模块，用于查询第一缓存空间是否存在所述第一关键词对应的第一类索引数据；第二查询模块，用于当所述第一缓存空间不存在所述第一关键词对应的第一类索引数据时，查询第一内存空间是否存在所述第一关键词对应的压缩第一类索引数据；所述第一内存空间存储压缩第一类索引数据；第一加载模块，用于当所述第一内存空间存在所述第一关键词对应的压缩第一类索引数据时，对所述第一关键词对应的压缩第一类索引数据进行解压缩，并将解压缩后的第一类索引数据加载到所述第一缓存空间；第一数据返回模块，用于返回所述第一关键词对应的第一类索引数据。

本发明实施例包括以下优点：在获取到第一关键词后，首先查询第一缓存空间是否存在第一关键词对应的第一类索引数据，如果不存在，则进一步查询第一内存空间是否存在第一关键词对应的压缩第一类索引数据，其中，第一内存空间存储压缩第一类索引数据，并当第一内存空间存在第一关键词对应的压缩第一类索引数据时，对第一关键词对应的压缩第一类索引数据进行解压缩，并将解压缩后的第一类索引数据加载到第一缓存空间，最后返回第一关键词对应的第一类索引数据。实现了在内存空间中存储压缩的第一类索引数据，而在查询时，建立第一缓存空间以缓存已经解压缩的第一类索引数据，在减小第一类索引数据内存占用量的同时，保证大部分的查询是已经解压缩的索引数据，且不影响搜索的响应时间。

附图说明