[发明专利]基于语言模型的信息交互方法及其装置、电子设备在审
申请号: | 202210135507.2 | 申请日: | 2022-02-14 |
公开(公告)号: | CN114491046A | 公开(公告)日: | 2022-05-13 |
发明(设计)人: | 翁兆琦 | 申请(专利权)人: | 中国工商银行股份有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/33;G06F16/335;G06F16/338;G06F16/36 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 周春枚 |
地址: | 100140 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 语言 模型 信息 交互 方法 及其 装置 电子设备 | ||
本发明公开了一种基于语言模型的信息交互方法及其装置、电子设备,涉及人工智能领域,其中,该方法包括:对目标询问信息进行分类,得到关于目标询问信息的主题实体,去除其中的主题实体,得到待处理询问信息,基于预设语言模型,分别对待处理询问信息以及候选答案集合进行向量化处理,对得到的询问信息向量和候选答案向量进行交互处理,对得到的交互矩阵与询问信息向量,以及与候选答案向量分别进行拼接,得到第一拼接向量和第二拼接向量,计算第一拼接向量与第二拼接向量之间的相关性得分,并将得分最高所指示的候选答案作为目标询问信息的回复答案。
技术领域
本发明涉及人工智能领域,具体而言,涉及一种基于语言模型的信息交互方法及其装置、电子设备。
背景技术
在大数据时代,面对五花八门的网络信息,怎样快速提取用户所需要的有效信息变得十分重要。因此,问答系统应运而生,该系统可以以简单快捷的方式在短时间内为用户提供准确答案。随着人工智能技术和算法的进步,问答系统的发展也变得更加成熟,比如百科类问答系统以及社区类问答系统等。
相关技术中,问答系统可以分为检索式问答系统、社区类问答系统和知识库问答系统等。对知识库问答方法的研究可以分为两种:一种是与语义解析相关的,另一种是与深度学习相关的。基于深度学习的知识库问答方法通常分两个步骤实现:(1)主题实体识别:根据用户咨询信息抽取出其中的主题实体,然后去相关知识库中寻找与主题实体对应的候选答案;(2)属性关系检测:分析用户咨询信息和候选答案间的关联关系,并提供关联性最高的候选答案作为回复答案返回给用户终端。
相关技术中,现有的知识库问答方法存在如下缺陷:(1)在主题实体识别步骤中,仅使用词向量工具和神经网络模式对用户问句进行序列标注,并没有考虑到用户问句自身结构信息对序列标注的影响;(2)在属性关系检测步骤中,还仅停留在对用户咨询信息和候选答案的粒度关系表示上,并没有对二者的之间的信息交互进行深度探索,容易导致查询到的回复答案的准确度较低。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种基于语言模型的信息交互方法及其装置、电子设备,以至少解决相关技术中无法挖掘询问信息和候选答案之间的信息交互,导致查询到的回复答案的准确度较低的技术问题。
根据本发明实施例的一个方面,提供了一种基于语言模型的信息交互方法,包括:对接收到的目标询问信息进行分类,得到关于所述目标询问信息的主题实体,其中,所述主题实体用于在预设知识数据库中查询候选答案,得到候选答案集合;去除所述目标询问信息中的所述主题实体,得到待处理询问信息;基于预设语言模型,对所述待处理询问信息进行向量化处理,得到询问信息向量,并对所述候选答案集合进行向量化处理,得到候选答案向量;对所述询问信息向量和所述候选答案向量进行交互处理,得到与所述询问信息向量对应的第一类交互矩阵以及与所述候选答案向量对应的第二类交互矩阵;对所述第一类交互矩阵和所述询问信息向量进行拼接,得到第一拼接向量,并对所述第二类交互矩阵和所述候选答案向量进行拼接,得到第二拼接向量;计算所述第一拼接向量与所述第二拼接向量之间的相关性得分,并将得分最高所指示的候选答案作为所述目标询问信息的回复答案。
可选地,在对接收到的目标询问信息进行分类,得到关于所述目标询问信息的主题实体之前,所述交互方法还包括:对所述目标询问信息进行分词处理,得到第一词序列;对所述第一词序列的首端和尾端加上预设标记信息,得到第二词序列。
可选地,对接收到的目标询问信息进行分类,得到关于所述目标询问信息的主题实体的步骤,包括:基于预设语言模型,对所述第二词序列进行编码,得到目标序列;计算所述目标序列中每个词向量的分类得分;对所述分类得分进行排序,并对排序结果进行筛选,筛选出大于预设得分阈值的分类得分;将筛选出的所述分类得分所指示的词向量表征为所述主题实体。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国工商银行股份有限公司,未经中国工商银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210135507.2/2.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置