[发明专利]意图识别模型的训练方法及装置、意图识别方法及装置在审
申请号: | 202011282073.6 | 申请日: | 2020-11-16 |
公开(公告)号: | CN112347760A | 公开(公告)日: | 2021-02-09 |
发明(设计)人: | 乐雨泉;赵宇明;陈蒙 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | G06F40/211 | 分类号: | G06F40/211;G06F40/279 |
代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 孙蕾 |
地址: | 100086 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 意图 识别 模型 训练 方法 装置 | ||
1.一种意图识别模型的训练方法,包括:
获取对话语料中的问题-问题对、问题-答案对和意图类别,其中,所述意图类别用于表征所述对话语料中的每轮句子的类别标签;
根据所述问题-问题对构建问题-问题相似度标注数据集,根据所述问题-答案对构建问题-答案相似度标注数据集,根据所述对话语料中的每轮句子和所述每轮句子对应的类别标签构建意图识别数据集;
根据所述问题-问题相似度标注数据集和所述问题-答案相似度标注数据集构建句子的相似度任务损失函数,根据所述意图识别数据集构建意图识别任务损失函数;以及
根据所述问题-问题相似度标注数据集、所述问题-答案相似度标注数据集和所述意图识别数据集对所述句子的相似度任务损失函数和所述意图识别任务损失函数进行优化训练,得到所述意图识别模型。
2.根据权利要求1所述的方法,其中,所述获取对话语料中的问题-问题对、问题-答案对包括:
通过自动挖掘的方式从所述对话语料中获取所述问题-问题对和所述问题-答案对;
在所述问题-问题对中的两个问题对应的答案相同的情况下,将所述问题-问题对的标签值配置为1;以及
在所述问题-问题对中的两个问题对应的答案不同的情况下,将所述问题-问题对的标签值配置为0。
3.根据权利要求2所述的方法,其中,根据所述问题-问题对构建问题-问题相似度标注数据集包括:
在所述问题-问题对中的两个问题的相似度小于预设阈值,且所述问题-问题对的标签值为1的情况下,变更所述问题-问题对的标签值至0或丢弃所述问题-问题对;
在所述问题-问题对中的两个问题的相似度大于预设阈值,且所述问题-问题对的标签值为0的情况下,变更所述问题-问题对的标签值至1或丢弃所述问题-问题对;以及
根据所述问题-问题对及其标签构建所述问题-问题相似度标注数据集。
4.根据权利要求1所述的方法,其中,根据所述问题-答案对构建问题-答案相似度标注数据集包括:
获取两条问题-答案对:(q1,a1)和(q2,a2);
在f(q1,q2)+f(a1,a2)<k的情况下,将所述两条问题-答案对中句子长度更长的问题-答案对的标签值配置为1,将所述两条问题-答案对中句子长度更短的问题-答案对的标签值配置为0,其中,q1表征以文本形式存储的第一问题,a1表征以文本形式存储的第一答案,q2表征以文本形式存储的第二问题,a2表征以文本形式存储的第二答案,f为编辑距离函数,k为过滤阈值;以及
根据所述问题-答案对及其标签构建所述问题-答案相似度标注数据集。
5.根据权利要求1所述的方法,其中,根据所述对话语料中的每轮句子和所述每轮句子对应的类别标签构建意图识别数据集包括:
获取包含有n轮句子的目标对话;
获取包含有t个窗口的滑窗,其中,t<n,t,n为正整数;
通过所述滑窗对所述目标对话进行遍历,确定所述目标对话中的每轮句子对应的类别标签;以及
根据所述每轮句子和所述每轮句子对应的类别标签构建所述意图识别数据集。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011282073.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种用于轻质原油的控水装置
- 下一篇:一种工程开挖料的堆存方法