[发明专利]基于多级语义匹配的检索方法、装置、计算机设备和存储介质有效
申请号: | 202111599012.7 | 申请日: | 2021-12-24 |
公开(公告)号: | CN114298055B | 公开(公告)日: | 2022-08-09 |
发明(设计)人: | 王健;林怀忠 | 申请(专利权)人: | 浙江大学 |
主分类号: | G06F40/30 | 分类号: | G06F40/30;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 杭州天勤知识产权代理有限公司 33224 | 代理人: | 曹兆霞 |
地址: | 310058 浙江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 多级 语义 匹配 检索 方法 装置 计算机 设备 存储 介质 | ||
1.一种基于多级语义匹配的检索方法,其特征在于,包括以下步骤:
语义特征解析:对检索语句和候选文档进行语义特征提取,得到检索语句的语句表征向量和候选文档的文档表征向量;
初级语义匹配和预筛选:依据语句表征向量和文档表征向量确定检索语句与每个候选文档的相关性,以进行初级语义匹配,并依据初级语义匹配结果筛选候选文档组成预筛选文档集;
二级语义匹配和确定检索结果:针对预筛选文档集中每个候选文档,利用LDA主题模型分别计算每个候选文档和检索语句的主题信息,利用BERT预训练模型提取检索语句与每个候选文档的结合语义信息,结合主题信息和结合语义信息进行二级语义匹配,依据二级语义匹配结果返回检索语句对应的候选文档的检索排序;
其中,在对检索语句与每个候选文档进行初级语义匹配时,首先,对语句表征向量和文档表征向量进行L2正则化处理,然后,依据L2正则化处理后的语句表征向量和文档表征向量进行余弦相似度计算以确定初级语义匹配得分作为初级语义匹配结果;
或,计算所输入的检索语句对应的语句表征向量q中第k个语素对应向量qk,计算qk和候选文档对应的文档表征向量di中第j个语素对应向量dj的内积的最大值,然后对语句表征向量q中每个语素求得的内积最大值求和作为最终语义匹配得分score1,该语义匹配得分即为初级语义匹配结果:
score1=∑k∈||q||maxj∈||d||qk·dj。
2.根据权利要求1所述的基于多级语义匹配的检索方法,其特征在于,所述语义特征解析,包括:利用基于ELECTRA模型和BiLSTM模型构建的语义特征解析模型对检索语句和候选文档进行语义特征提取,以得到检索语句的语句表征向量和候选文档的文档表征向量。
3.根据权利要求1所述的基于多级语义匹配的检索方法,其特征在于,所述初级语义匹配和预筛选,还包括:依据文档表征向量对候选文档进行聚类,得到多个聚类簇及对应的聚类中心,依据语句表征向量和每个聚类中心对应文档表征向量确定检索语句与每个聚类中心对应的候选文档的初级语义匹配结果,依据初级语义匹配结果从所有聚类中心中筛选多个相似的聚类中心作为预筛聚类中心,然后筛选预筛聚类中心对应的聚类簇包含的候选文档组成预筛选文档集。
4.根据权利要求1所述的基于多级语义匹配的检索方法,其特征在于,所述依据初级语义匹配结果筛选候选文档组成预筛选文档集,包括:依据文档表征向量对候选文档进行聚类,得到多个聚类簇及对应的聚类中心,依据初级语义匹配结果从所有聚类中心中筛选多个相似的聚类中心作为预筛聚类中心,然后筛选预筛聚类中心对应的聚类簇包含的候选文档组成预筛选文档集。
5.根据权利要求1所述的基于多级语义匹配的检索方法,其特征在于,所述结合两个主题信息和结合语义信息进行二级语义匹配,包括:两个主题信息和结合语义信息拼接后输入至全连接层,经过全连接融合后,输入至softmax层,经计算得到二级语义匹配结果。
6.根据权利要求1或3所述的基于多级语义匹配的检索方法,其特征在于,所述检索方法还包括:语义特征解析后,采用Faiss向量索引库存储候选文档的文档表征向量,初级语义匹配和预筛选过程、二级语义匹配和确定检索结果过程均通过Faiss向量索引库调取文档表征向量进行计算。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大学,未经浙江大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111599012.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种滤芯生产用抽干装置
- 下一篇:天线系统及其毫米波雷达