[发明专利]意图识别方法、装置、设备及存储介质在审
申请号: | 201910285223.X | 申请日: | 2019-04-10 |
公开(公告)号: | CN109992671A | 公开(公告)日: | 2019-07-09 |
发明(设计)人: | 孟振南 | 申请(专利权)人: | 出门问问信息科技有限公司 |
主分类号: | G06F16/36 | 分类号: | G06F16/36;G06F16/35;G06F17/27 |
代理公司: | 北京鼎承知识产权代理有限公司 11551 | 代理人: | 李伟波;韩德凯 |
地址: | 100094 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 输入序列 向量表示 神经网络 序列标注 意图识别 计算机可读存储介质 意图识别装置 存储介质 电子设备 图谱层 图谱 | ||
1.一种意图识别方法,其特征在于,包括:
将输入序列输入知识图谱层,并基于所述知识图谱中的特征,生成所述输入序列的第一向量表示;
将所述第一向量表示输入经预训练的第一神经网络层,以生成所述输入序列的第二向量表示;
将所述第二向量表示输入第二神经网络层得到所述输入序列的第三向量表示,并且基于所述第三向量表示生成所述输入序列的序列标注结果;以及
基于所述序列标注结果,获得与所述输入序列相关的一个或多个意图。
2.如权利要求1所述的方法,其中,将所述第二向量表示输入第二神经网络得到所述输入序列的第三向量表示之后,
将所述第三向量表示输入第三神经网络层,得到所述输入序列的序列标注结果。
3.如权利要求1所述的方法,其特征在于,在将所述输入序列输入知识图谱层之前,
对输入序列进行编码,并将编码后的输入序列输入知识图谱层。
4.如权利要求1至3中任一项所述的方法,其特征在于,
所述第一神经网络层采用双向语言模型进行预训练,并包括针对序列标注任务的精调操作。
5.如权利要求1至4中任一项所述的方法,其特征在于,还包括获取包括至少一个标签的标签集合,并且,所述序列标注结果包括将所述输入序列中的每个词标注上所述标签集合中的标签之一。
6.如权利要求1至5中任一项所述的方法,其特征在于,
所述第二神经网络层为双向长短期记忆网络,所述第二向量表示包括将所述输入序列中的每个词标注上所述标签列表中的标签之一的概率值。
7.如权利要求2所述的方法,其特征在于,所述第三神经网络层为条件随机场。
8.一种意图识别装置,其特征在于,包括:
第一处理模块,用于将输入序列输入知识图谱层,并基于所述知识图谱中的特征,生成所述输入序列的第一向量表示;
第二处理模块,用于将所述第一向量表示输入经预训练的第一神经网络层,以生成所述输入序列的第二向量表示;
第三处理模块,用于将所述第二向量表示输入第二神经网络层得到所述输入序列的第三向量表示,并且基于所述第三向量表示生成所述输入序列的序列标注结果;以及
第四处理模块,用于基于所述序列标注结果获得与所述输入序列相关的一个或多个意图。
9.一种电子设备,其特征在于,包括:
存储器,所述存储器存储可执行指令;以及
处理器,所述处理器执行所述存储器存储的可执行指令,使得所述处理器执行如权利要求1至7中任一项所述的方法。
10.一种可读存储介质,其特征在于,所述可读存储介质中存储有可执行指令,所述可执行指令被处理器执行时用于实现如权利要求1至7中任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于出门问问信息科技有限公司,未经出门问问信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910285223.X/1.html,转载请声明来源钻瓜专利网。