[发明专利]命名实体识别模型训练方法、命名实体识别方法及装置有效
申请号: | 201910857320.1 | 申请日: | 2019-09-11 |
公开(公告)号: | CN110705294B | 公开(公告)日: | 2023-06-23 |
发明(设计)人: | 黎旭;关超伟;左赛;赵楠;徐详朕 | 申请(专利权)人: | 苏宁云计算有限公司 |
主分类号: | G06F40/295 | 分类号: | G06F40/295 |
代理公司: | 北京市万慧达律师事务所 11111 | 代理人: | 张慧娟 |
地址: | 210000 江苏省南*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开一种命名实体识别模型训练方法、命名实体识别方法及装置。训练方法包括:对语料样本进行预处理,得到字符序列样本,并对字符序列样本标注命名实体标签,得到训练字符序列;基于第一双向语言模型和第一自注意力机制模型分别对训练字符序列进行预训练,获得字特征向量和字权重向量并进行融合获得第二上下文向量;基于第二双向语言模型和第二自注意力机制模型分别对训练字符序列进行预训练,获得词特征向量和词权重向量并进行融合获得第二上下文向量;使用第一上下文向量和第二上下文向量对依次连接的双向神经网络和条件随机场进行训练,得到命名实体识别模型。本发明有效提升了命名实体识别模型的训练效果,提高了命名实体的识别准确度。 | ||
搜索关键词: | 命名 实体 识别 模型 训练 方法 装置 | ||
【主权项】:
1.一种命名实体识别模型训练方法,其特征在于,所述方法包括:/n对语料样本进行预处理,得到字符序列样本,并对所述字符序列样本标注命名实体标签,得到训练字符序列;/n基于预设的第一双向语言模型和第一自注意力机制模型分别对所述训练字符序列进行预训练,获得所述训练字符序列对应的字特征向量和字权重向量;/n基于预设的第二双向语言模型和第二自注意力机制模型分别对所述训练字符序列进行预训练,获得所述训练字符序列对应的词特征向量和词权重向量;/n对所述训练字符序列对应的字特征向量和字权重向量进行融合获得所述训练字符序列的第一上下文向量;/n对所述训练字符序列对应的词特征向量和词权重向量进行融合获得所述训练字符序列的第二上下文向量;/n使用所述训练字符序列的第一上下文向量和第二上下文向量对依次连接的双向神经网络和条件随机场进行训练,得到命名实体识别模型。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏宁云计算有限公司,未经苏宁云计算有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910857320.1/,转载请声明来源钻瓜专利网。