[发明专利]用于命名实体识别的方法、电子设备和存储介质有效
申请号: | 202011416137.7 | 申请日: | 2020-12-07 |
公开(公告)号: | CN112395882B | 公开(公告)日: | 2021-04-06 |
发明(设计)人: | 闫华星;郭相林;郑学坤 | 申请(专利权)人: | 震坤行网络技术(南京)有限公司 |
主分类号: | G06F40/295 | 分类号: | G06F40/295;G06F40/30;G06F40/126;G06N3/04 |
代理公司: | 北京市金杜律师事务所 11256 | 代理人: | 王茂华 |
地址: | 210000 江苏省南*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 命名 实体 识别 方法 电子设备 存储 介质 | ||
1.一种用于命名实体识别的方法,包括:
生成与命名实体集相关联的字符向量集和词语向量集;
生成包括查询词中的多个字符和多个第一词语的第一序列;
基于所述命名实体集、所述字符向量集和所述词语向量集,生成第二序列,所述第二序列包括与所述多个字符相关联的多个字符编码结果和与所述多个第一词语相关联的多个第一词语编码结果;
基于双向长短期记忆网络和所述第二序列,生成第一语义特征序列,所述第一语义特征序列包括与所述多个字符相关联的多个语义特征和与所述多个第一词语相关联的多个语义特征;
对所述第一序列中的两两元素进行相对位置编码,以生成多个相对位置编码结果;
基于所述第一语义特征序列、所述多个相对位置编码结果和自注意力网络,生成第二语义特征序列,所述第二语义特征序列包括多个自注意力特征;以及
基于所述第二语义特征序列、残差层和条件随机场网络,确定与所述查询词相关联的多个命名实体标签;
其中生成所述多个字符编码结果包括对于所述多个字符中的每个字符执行以下步骤:
在所述命名实体集中确定含有所述字符的多个第二词语;
确定所述多个第二词语在所述命名实体集中的多个频次;
在所述词语向量集中确定与所述多个第二词语相关联的多个词语向量;
基于所述多个词语向量和所述多个频次,生成多个第二词语编码结果;
在所述字符向量集中确定与所述字符相关联的字符向量;以及
基于所述多个第二词语编码结果和所述字符向量,生成与所述字符相关联的字符编码结果。
2.根据权利要求1所述的方法,其中所述多个第二词语包括:
以所关联字符开始的第二词语子集、以所关联字符结束的第二词语子集、所关联字符位于内部的第二词语子集以及所关联字符单独成词的第二词语子集。
3.根据权利要求2所述的方法,其中生成所述多个第二词语编码结果包括对于所述多个第二词语中的每个第二词语子集执行以下步骤:
生成所述多个频次之和;以及
基于所述第二词语子集的频次子集、所述多个频次之和以及与所述第二词语子集相关联的词语向量子集,生成与所述第二词语相关联的第二词语编码结果。
4.根据权利要求1所述的方法,其中生成所述字符编码结果包括:
将所述多个第二词语编码结果进行拼接,以生成拼接结果;以及
将所述拼接结果和所述字符向量拼接,以生成所述字符编码结果。
5.根据权利要求1所述的方法,其中对所述第一序列中的两两元素进行相对位置编码包括对包括所述第一序列中的两个元素的每个元素对执行以下步骤:
确定所述元素对中的两个元素在所述查询词中的两个起始位置和两个结束位置;
确定起始位置对起始位置的第一差、结束位置对结束位置的第二差、起始位置对结束位置的第三差以及结束位置对起始位置的第四差;
基于所述第一差、所述第二差、所述第三差和所述第四差,生成第一位置编码结果、第二位置编码结果、第三位置编码结果和第四位置编码结果;
对所述第一位置编码结果、所述第二位置编码结果、第三位置编码结果和所述第四位置编码结果进行拼接,以生成拼接结果;以及
对所述拼接结果进行变换处理,以生成与所述两个元素相关联的相对位置编码结果。
6.根据权利要求1所述的方法,其中生成所述第二语义特征序列包括:
对于所述多个相对位置编码结果中的每一个相对位置编码结果执行以下步骤:
在所述第一序列中确定与所述相对位置编码结果相关联的两个元素;
从所述第一语义特征序列中确定与所述两个元素相关联的两个语义特征;以及
基于所述两个语义特征和所述相对位置编码结果,生成与所述相对位置编码结果相关联的自注意力权重;以及
基于与所述多个相对位置编码结果相关联的多个自注意力权重和所述第一语义特征序列,生成所述第二语义特征序列。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于震坤行网络技术(南京)有限公司,未经震坤行网络技术(南京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011416137.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:任务调度方法、系统、设备及介质
- 下一篇:一种术后临床护理用辅助起身装置