[发明专利]一种文件数据的读取、查询方法、装置及可读存储介质

说明书

本发明公开了一种文件数据的读取、查询方法、装置及可读存储介质，包括：获取文本信息；提取所述文本信息中所需关键词；判断键值对数据库中是否存在对应所提取关键词的值信息；若判定键值对数据库中存在对应所提取关键词的值信息，则将所述关键词和对应值信息保存到索引文件中；将所述索引文件加载到内存中，通过此方案，先将大量数据存储到索引文件中，再通过索引文件一次性加载到内存中，相比较于传统方式中将大量数据逐行读取到内存而言，此方案能加快读取的速度，从而缩短数据读取时间。

技术领域

本发明涉及文件存储和读取技术领域，尤其涉及一种文件数据的读取、查询方法、装置及可读存储介质。

背景技术

随着智能终端设备的普及，常常需要读取设备中的文件，当终端设备的数据存储达到一定数量级的情况下，读取速度将会大大降低。例如当一个文件中有10万行数据时，如果逐行读取每一行数据到内存中，需要进行10万次IO操作，导致文件数据初始化到内存中时耗时比较长，这在现如今的设备中是不可忍受的现象，导致用户体验很差。

发明内容

本发明提供一种文件数据的读取、查询方法、装置及可读存储介质，具有快速读取文件数据的特点。

本发明提供一种文件数据的读取方法，包括：获取文本信息；提取所述文本信息中所需关键词；判断键值对数据库中是否存在对应所述提取关键词的值信息；若判定键值对数据库中存在对应所述提取关键词的值信息，则将所述关键词和对应值信息保存到索引文件中，将所述索引文件加载到内存中。

在一可实施方式中，将所述关键词和对应值信息保存到索引文件中，包括：将所述关键词和对应值信息添加到数据结构中；计算所述关键词的哈希值；将所述数据结构根据所述哈希值进行排序；将排序后所述数据结构存储到索引文件中。

在一可实施方式中，将排序后所述数据结构存储到索引文件中，包括：采用二进制格式将排序后所述数据结构存储到索引文件中。

在一可实施方式中，所述索引文件至少包括头文件信息、一级索引和核心数据；其中，所述头文件信息包括一级索引地址；所述一级索引包括所述关键词的哈希值、关键词索引和值索引；所述核心数据包括关键词数据和值信息数据；所述一级索引地址指向所述一级索引，所述关键词索引指向所述关键词数据，所述值索引指向所述值信息数据。

在一可实施方式中，所述一级索引还包括所述关键词字节长度和所述值信息字节长度。

本发明另一方面提供一种文件数据的查询方法，包括：获取待查关键词；计算所述待查关键词的哈希值；判断索引文件中是否存在所述待查关键词的哈希值；若判定索引文件中存在所述待查关键词的哈希值，则获取对应所述待查关键词的值信息。

在一可实施方式中，在获取对应所述待查关键词的值信息之前，所述方法还包括：若判定索引文件中存在所述待查关键词的哈希值，则进一步判断待查关键词是否与所述索引文件中对应哈希值的关键词一致；若判定待查关键词与所述索引文件中对应哈希值的关键词一致，则获取对应所述待查关键词的值信息。

在一可实施方式中，通过二分法判断索引文件中是否存在所述待查关键词的哈希值。

本发明另一方面提供一种文件数据的读取装置，所述装置包括：获取模块，用于获取文本信息；提取模块，用于提取所述文本信息中所需关键词；判断模块，用于判断键值对数据库中是否存在对应所述提取关键词的值信息；存储模块，用于若经所述判断模块判定键值对数据库中存在对应所述提取关键词的值信息，则将所述关键词和对应值信息保存到索引文件中。

本发明另一方面提供一种文件数据的查询装置，所述装置包括：获取模块，用于获取待查关键词；计算模块，用于计算所述待查关键词的哈希值；判断模块，用于判断索引文件中是否存在所述待查关键词的哈希值；查询模块，用于若所述判断模块判定索引文件中存在所述待查关键词的哈希值，则获取对应所述待查关键词的值信息。