[发明专利]数据搜索方法、装置、设备及存储介质在审
申请号: | 202010857993.X | 申请日: | 2020-08-24 |
公开(公告)号: | CN111931034A | 公开(公告)日: | 2020-11-13 |
发明(设计)人: | 赵铭鑫;黄斌;朱健琛;李晨;黄泽谦;王一径;罗勋;朱宗磊 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/9532 | 分类号: | G06F16/9532;G06F40/289 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 张所明 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 搜索 方法 装置 设备 存储 介质 | ||
1.一种数据搜索方法,其特征在于,所述方法包括:
获取搜索文本;
对所述搜索文本进行切词处理,得到至少一个单粒度词,所述单粒度词是指包含单个信息量的词;
分别对所述单粒度词进行实体识别处理和相邻单粒度词合并处理,得到至少一个多粒度词,所述多粒度词是指包含多个单粒度词的词;
基于所述单粒度词和所述多粒度词,确定所述搜索文本对应的搜索结果。
2.根据权利要求1所述的方法,其特征在于,所述基于所述单粒度词和所述多粒度词,确定所述搜索文本对应的搜索结果,包括:
获取各个所述单粒度词分别对应的倒排列表;其中,所述单粒度词对应的倒排列表中包括至少一个第一文档的标识,所述第一文档中包括所述单粒度词;
获取各个所述多粒度词分别对应的倒排列表;其中,所述多粒度词对应的倒排列表中包括至少一个第二文档的标识,所述第二文档中包括所述多粒度词;
对各个所述单粒度词分别对应的倒排列表以及各个所述多粒度词分别对应的倒排列表进行处理,得到合并倒排列表;
基于所述合并倒排列表确定所述搜索文本对应的搜索结果。
3.根据权利要求2所述的方法,其特征在于,所述对各个所述单粒度词分别对应的倒排列表以及各个所述多粒度词分别对应的倒排列表进行合并处理,得到合并倒排列表,包括:
对各个所述单粒度词分别对应的倒排列表进行求交集处理,得到交集倒排列表,所述交集倒排列表中包括至少一个第三文档的标识,所述第三文档中包括各个所述单粒度词;
对所述交集倒排列表和各个所述多粒度词分别对应的倒排列表进行求并集处理,得到所述合并倒排列表。
4.根据权利要求3所述的方法,其特征在于,所述基于所述合并倒排列表确定所述搜索文本对应的搜索结果,包括:
将所述合并倒排列表包括的所述至少一个第二文档的标识排在所述至少一个第三文档的标识之前,得到排序后的所述合并倒排列表;
基于排序后的所述合并倒排列表顺序确定所述搜索文本对应的搜索结果。
5.根据权利要求1所述的方法,其特征在于,所述分别对所述单粒度词进行实体识别处理和相邻单粒度词合并处理,得到至少一个多粒度词,包括:
对所述单粒度词进行实体识别处理,得到实体词集合,所述实体词集合包括单粒度实体词和多粒度实体词;
选取所述实体词集合中的所述多粒度实体词,得到多粒度实体词集合;
对所述单粒度词进行相邻单粒度词合并处理,得到第一多粒度词集合,所述第一多粒度词集合包括至少一个目标多粒度词;
选取所述第一多粒度词集合中在目标词典中出现的目标多粒度词,得到第二多粒度词集合,所述目标词典中包括至少一个多粒度词;
根据所述多粒度实体词集合和所述第二多粒度词集合,确定所述至少一个多粒度词。
6.根据权利要求5所述的方法,其特征在于,所述根据所述多粒度实体词集合和所述第二多粒度词集合,确定所述至少一个多粒度词,包括:
响应于所述第二多粒度词集合中存在两个目标多粒度词包括相同的单粒度词,去除所述两个目标多粒度词中分数较低的目标多粒度词,得到第三多粒度词集合;
选取所述第三多粒度词集合中分数排在前n位的目标多粒度词,得到第四多粒度词集合,所述n为正整数;
将所述多粒度实体词集合和所述第四多粒度词集合进行合并去重处理,得到所述至少一个多粒度词。
7.根据权利要求5或6所述的方法,其特征在于,所述选取所述第一多粒度词集合中在目标词典中出现的第一多粒度词,得到第二多粒度词集合之前,还包括:
确定初始词典中的各个多粒度词的分数,所述分数用于表征所述多粒度词的重要程度;
去除所述初始词典中分数低于阈值的多粒度词,得到所述目标词典。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010857993.X/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置