[发明专利]索引存储方法、装置、检索引擎、电子设备及存储介质在审
申请号: | 202111638246.8 | 申请日: | 2021-12-29 |
公开(公告)号: | CN114218161A | 公开(公告)日: | 2022-03-22 |
发明(设计)人: | 滕岩松;刘伟;陈正亮;张谦 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F16/13 | 分类号: | G06F16/13;G06F16/901;G06F16/93;G06F3/06 |
代理公司: | 北京易光知识产权代理有限公司 11596 | 代理人: | 王姗姗 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 索引 存储 方法 装置 检索 引擎 电子设备 介质 | ||
本公开提供了一种索引存储方法、装置、检索引擎、电子设备及存储介质,涉及大数据处理技术领域。方法具体实现方案为:对目标文件进行处理,得到所述目标文件的索引文件;基于所述索引文件的数据量,确定所述索引文件的存储位置,所述索引文件的存储位置至少包含内存;基于所述索引文件的存储位置所对应的数据存储结构,对所述索引文件进行存储,所述数据存储结构至少包含内存数据存储结构。通过上述方案,可以根据索引文件的数据量灵活选择合适的存储位置,保证了处理效率。
技术领域
本公开涉及大数据处理技术领域,尤其涉及索引存储方法、装置、检索引擎、电子设备及存储介质。
背景技术
检索引擎技术在计算机科学的信息获取领域一直都是一项前沿技术,通常采用的基于磁盘的检索引擎,以下简称磁盘检索引擎。然而,该磁盘检索引擎越来越无法适应对读取处理中更高的效率需求,因此,如何提供一种效率更高的检索存储方式,就成为需要解决的问题。
发明内容
本公开实施例提供一种索引存储方法、装置、检索引擎、电子设备及存储介质,以解决现有技术中的一个或多个技术问题。
第一方面,本公开提供一种索引存储方法,包括:
对目标文件进行处理,得到所述目标文件的索引文件;
基于所述索引文件的数据量,确定所述索引文件的存储位置,所述索引文件的存储位置至少包含内存;
基于所述索引文件的存储位置所对应的数据存储结构,对所述索引文件进行存储,所述数据存储结构至少包含内存数据存储结构。
第二方面,本公开提供一种索引存储区装置,包括:
索引创建模块,用于对目标文件进行处理,得到所述目标文件的索引文件;
存储方式确定模块,用于基于所述索引文件的数据量,确定所述索引文件的存储位置,所述索引文件的存储位置至少包含内存;
索引存储模块,用于基于所述索引文件的存储方式所对应的数据存储结构,对所述索引文件进行存储,所述数据存储结构至少包含内存数据存储结构。
第三方面,本公开实施例提供一种检索引擎,包括本公开提供的索引形成装置。
第四方面,本公开实施例提供一种电子设备,包括:
至少一个处理器;以及
与至少一个处理器通信连接的存储器;其中,
存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行本公开任意一项实施例所提供的方法。
第五方面,本公开实施例提供一种存储有计算机指令的非瞬时计算机可读存储介质,计算机指令用于使计算机执行本公开任意一项实施例所提供的方法。
通过上述方案,可以根据索引文件的数据量灵活选择合适的存储位置,保证了处理效率,并且还可以兼顾性能和成本。
上述可选方式所具有的其他效果将在下文中结合具体实施例加以说明。
附图说明
附图用于更好地理解本方案,不构成对本公开的限定。其中:
图1是根据本公开一实施例的索引存储方法的流程图;
图2是根据本公开一实施例的索引存储装置的示意性框图;
图3是根据本公开一实施例的索引存储模块的示意性框图;
图4是根据本公开一实施例的检索引擎的示意性框图;
图5是用来实现本公开实施例的索引存储方法的电子设备的框图。
具体实施方式
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111638246.8/2.html,转载请声明来源钻瓜专利网。