[发明专利]神经网络训练方法、成语误用检测方法、装置和电子设备有效
申请号: | 201910821030.1 | 申请日: | 2019-08-30 |
公开(公告)号: | CN110532562B | 公开(公告)日: | 2021-07-16 |
发明(设计)人: | 杨双涛 | 申请(专利权)人: | 联想(北京)有限公司 |
主分类号: | G06F40/30 | 分类号: | G06F40/30;G06F40/289;G06F16/35;G06N3/08 |
代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 杨静 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 神经网络 训练 方法 成语 误用 检测 装置 电子设备 | ||
1.一种用于训练神经网络的方法,包括:
获取多个语句文本;
对于所述多个语句文本中的任一语句文本,从所述任一语句文本中提取成语文本,并获取所述成语文本的语义信息,其中由所述任一语句文本和所述语义信息构成一个样本对;
为所述一个样本对添加标签,所述标签表征所述语义信息与所述任一语句文本的语境信息之间是否相适配;以及
利用与所述多个语句文本对应的多个带有标签的样本对对所述神经网络进行训练,得到用于检测成语误用的目标神经网络。
2.根据权利要求1所述的方法,其中,所述神经网络包括第一编码器、第二编码器和分类器;
所述利用与所述多个语句文本对应的多个带有标签的样本对对所述神经网络进行训练包括:
将所述一个样本对输入至所述神经网络,由所述第一编码器和所述第二编码器分别对所述任一语句文本和所述语义信息进行编码,得到语句表示向量和语义表示向量,再由所述分类器基于所述语句表示向量和语义表示向量输出分类结果;
基于所述分类结果和所述一个样本对的标签确定损失函数是否实现收敛;
如果是,则确定训练完成,得到所述目标神经网络;以及
如果否,则调整所述神经网络的参数后重复上述对所述神经网络进行训练的操作,直至所述损失函数实现收敛。
3.根据权利要求2所述的方法,其中,所述由所述分类器基于所述语句表示向量和语义表示向量输出分类结果包括:
对所述语句表示向量和所述语义表示向量进行组合,得到第一特征向量;以及
对所述第一特征向量进行全连接映射,得到关于所述语义信息与所述任一语句文本的语境信息之间是否相适配的分类结果。
4.一种成语误用检测方法,包括:
获取输入语句文本;
获取基于如权利要求1~3所述的方法训练得到的目标神经网络;
从所述输入语句文本中提取输入成语文本,并获取所述输入成语文本的语义信息;以及
利用所述目标神经网络处理所述输入语句文本和所述输入成语文本的语义信息,得到表征所述输入成语文本的语义信息与所述输入语句文本的语境信息之间是否相适配的检测结果。
5.根据权利要求4所述的方法,其中,所述目标神经网络包括第一优化编码器、第二优化编码器和优化分类器;
所述利用所述目标神经网络处理所述输入语句文本和所述输入成语文本的语义信息包括:
利用所述第一优化编码器对所述输入语句文本进行编码,得到输入语句表示向量;
利用所述第二优化编码器对所述输入成语文本的语义信息进行编码,得到成语语义表示向量;以及
利用所述优化分类器基于所述输入语句表示向量和所述成语语义表示向量进行分类处理,得到所述检测结果。
6.根据权利要求5所述的方法,其中,所述利用所述优化分类器基于所述输入语句表示向量和所述成语语义表示向量进行分类处理包括:
对所述输入语句表示向量和所述成语语义表示向量进行组合,得到第二特征向量;以及
对所述第二特征向量进行全连接映射,得到所述检测结果。
7.根据权利要求6所述的方法,其中,所述对所述输入语句表示向量和所述成语语义表示向量进行组合包括:
对所述输入语句表示向量和所述成语语义表示向量进行拼接;并且/或者
对所述输入语句表示向量和所述成语语义表示向量进行指定运算。
8.一种用于训练神经网络的装置,包括:
语句获取模块,用于获取多个语句文本;
样本构建模块,用于对于所述多个语句文本中的任一语句文本,从所述任一语句文本中提取成语文本,并获取所述成语文本的语义信息,其中由所述任一语句文本和所述语义信息构成一个样本对;
标记模块,用于为所述一个样本对添加标签,所述标签表征所述语义信息与所述任一语句文本的语境信息之间是否相适配;以及
训练模块,用于利用与所述多个语句文本对应的多个带有标签的样本对对所述神经网络进行训练,得到用于检测成语误用的目标神经网络。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于联想(北京)有限公司,未经联想(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910821030.1/1.html,转载请声明来源钻瓜专利网。