[发明专利]问答模型的训练方法及装置有效
申请号: | 202110665052.0 | 申请日: | 2021-06-16 |
公开(公告)号: | CN113127624B | 公开(公告)日: | 2021-11-16 |
发明(设计)人: | 冯晓阳;李长亮;姬子明 | 申请(专利权)人: | 北京金山数字娱乐科技有限公司 |
主分类号: | G06F16/332 | 分类号: | G06F16/332;G06F16/33;G06F16/35;G06F40/216;G06F40/30;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 北京智信禾专利代理有限公司 11637 | 代理人: | 吴肖肖 |
地址: | 100085 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 问答 模型 训练 方法 装置 | ||
本申请提供问答模型的训练方法及装置,其中所述问答模型的训练方法包括:构建样本语料对应的初始文本意群,并基于所述初始文本意群生成所述样本语料对应的场景定向词表空间;获取训练样本,并确定所述训练样本对应的样本词组;基于所述样本词组查询所述场景定向词表空间,根据查询结果确定所述训练样本对应的目标文本意群;利用所述目标文本意群和所述训练样本对初始问答模型进行训练,直至获得满足训练停止条件的目标问答模型。
技术领域
本申请涉及人工智能技术领域,特别涉及一种问答模型的训练方法及装置。
背景技术
随着人工智能产业的发展,问答模型在实际应用中所占的比例也逐渐增高,用户对问答模型的回复准确性和回复效率的要求也越来越高。现有技术中,问答模型一般通过理解用户发出的问题,并根据用户的问题生成针对性的答案进行回复。但是目前的问答模型对用户的回复内容准确性不高,回复速度也有待提升。因此,如何解决上述问题,为问答模型提升回复的准确性和回复速度,成为了本领域技术人员亟需解决的问题。
发明内容
有鉴于此,本申请实施例提供了一种问答模型的训练方法,以解决现有技术中存在的技术缺陷。本申请实施例同时提供了一种问答模型的训练装置,一种文本处理方法,一种文本处理装置,一种计算设备,以及一种计算机可读存储介质。
根据本申请实施例的第一方面,提供了一种问答模型的训练方法,包括:
构建样本语料对应的初始文本意群,并基于所述初始文本意群生成所述样本语料对应的场景定向词表空间;
获取训练样本,并确定所述训练样本对应的样本词组;
基于所述样本词组查询所述场景定向词表空间,根据查询结果确定所述训练样本对应的目标文本意群;
利用所述目标文本意群和所述训练样本对初始问答模型进行训练,直至获得满足训练停止条件的目标问答模型。
可选地,所述基于所述初始文本意群生成所述样本语料对应的场景定向词表空间,包括:
为所述样本语料添加语境标签,以及提取所述初始文本意群中的初始词组;
建立所述语境标签与所述初始文本意群的对应关系,并根据所述对应关系和初始词组构建所述样本语料对应的所述场景定向词表空间。
可选地,所述为所述样本语料添加语境标签,包括:
提取所述样本语料的多个初始特征,并对所述多个初始特征进行预处理获得多个目标特征;
计算各个目标特征与所述样本语料的语境相似度,根据语境相似度计算结果选择至少一个目标特征作为所述语境标签,并添加至所述样本语料。
可选地,所述基于所述样本词组查询所述场景定向词表空间,根据查询结果确定所述训练样本对应的目标文本意群,包括:
将所述样本词组映射到所述场景定向词表空间,计算所述样本词组与所述语境标签的词组相似度;
根据词组相似度计算结果确定目标语境标签,并将所述目标语境标签对应的初始文本意群作为所述目标文本意群。
可选地,所述确定所述训练样本对应的样本词组,包括:
对所述训练样本进行解析,获得所述训练样本中的样本问题文本;
提取所述样本问题文本中的第一词单元和第二词单元,基于所述第一词单元和所述第二词单元构建所述样本词组。
可选地,所述利用所述目标文本意群和所述训练样本对初始问答模型进行训练,直至获得满足训练停止条件的目标问答模型,包括:
将所述目标文本意群和所述训练样本中的所述样本问题文本输入至所述初始问答模型进行处理,获得预测答案文本;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山数字娱乐科技有限公司,未经北京金山数字娱乐科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110665052.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:电池包
- 下一篇:一种净化玻璃墙板安装辅助装置及其安装方法