[发明专利]实体识别方法、装置、电子设备及存储介质有效
申请号: | 202110701796.3 | 申请日: | 2021-06-23 |
公开(公告)号: | CN113408287B | 公开(公告)日: | 2022-07-29 |
发明(设计)人: | 周新宇;刘振国;陈凯 | 申请(专利权)人: | 北京达佳互联信息技术有限公司 |
主分类号: | G06F40/295 | 分类号: | G06F40/295 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 李娜 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 实体 识别 方法 装置 电子设备 存储 介质 | ||
1.一种实体识别方法,其特征在于,包括:
根据实体词表,将对象主题文本切分为多个字符和至少一个实体词,并确定包括所述对象主题文本中每个字符的词汇;
确定所述每个字符的字向量,作为第一字向量,并确定所述实体词的词向量,作为第一词向量,确定所述词汇的词向量,作为第二词向量;
根据包括同一字符的第二词向量和第一字向量,确定所述同一字符的第二字向量;
根据每个字符的第二字向量和所述实体词的第一词向量,对所述对象主题文本进行实体识别,得到实体识别结果。
2.根据权利要求1所述的方法,其特征在于,根据包括同一字符的第二词向量和第一字向量,确定所述同一字符的第二字向量,包括:
分别确定包括同一字符的多个词汇中以所述同一字符开头、居中和结尾的词汇;
确定以所述同一字符开头的词汇的第二词向量的平均向量,作为第一平均向量,确定以所述同一字符居中的词汇的第二词向量的平均向量,作为第二平均向量,并确定以所述同一字符结尾的词汇的第二词向量的平均向量,作为第三平均向量;
拼接所述同一字符的第一字向量、所述第一平均向量、所述第二平均向量和所述第三平均向量,作为所述同一字符的第二字向量。
3.根据权利要求1所述的方法,其特征在于,根据包括同一字符的第二词向量和第一字向量,确定所述同一字符的第二字向量,包括:
确定包括同一字符的至少一个词汇的第二词向量的平均向量;
拼接所述同一字符的第一字向量和所述平均向量,作为所述同一字符的第二字向量。
4.根据权利要求1所述的方法,其特征在于,根据每个字符的第二字向量和所述实体词的第一词向量,对所述对象主题文本进行实体识别,得到实体识别结果,包括:
根据所述每个字符的第二字向量、每个字符在所述对象主题文本中的第一位置信息、第一词向量以及所述实体词在所述对象主题文本中的第二位置信息,对所述对象主题文本进行实体识别,得到实体识别结果。
5.根据权利要求4所述的方法,其特征在于,所述第一位置信息包括第一开头位置信息和第一结尾位置信息,所述第二位置信息包括第二开头位置信息和第二结尾位置信息。
6.根据权利要求4所述的方法,其特征在于,根据所述每个字符的第二字向量、每个字符在所述对象主题文本中的第一位置信息、第一词向量以及所述实体词在所述对象主题文本中的第二位置信息,对所述对象主题文本进行实体识别,得到实体识别结果,包括:
根据所述每个字符在所述对象主题文本中的第一位置信息和所述实体词在所述对象主题文本中的第二位置信息,通过编码器分别确定每个字符相对于所述多个字符中除当前的字符外的其他字符的相对位置编码;
根据所述每个字符的第二字向量、第一词向量以及每个字符相对于所述其他字符的相对位置编码,通过注意力机制确定每个字符相对于所述其他字符的注意力权重;
根据所述每个字符相对于所述其他字符的注意力权重,通过解码器对所述对象主题文本进行实体识别,得到所述对象主题文本中的实体识别结果。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述确定所述每个字符的字向量,作为第一字向量,并确定所述实体词的词向量,作为第一词向量,确定所述词汇的词向量,作为第二词向量,包括:
通过词向量模型确定所述每个字符的字向量,作为第一字向量,并通过所述词向量模型确定所述实体词的词向量,作为第一词向量,通过所述词向量模型确定所述词汇的词向量,作为第二词向量;其中,所述词向量模型基于所述实体词表训练得到;
所述根据每个字符的第二字向量和所述实体词的第一词向量,对所述对象主题文本进行实体识别,得到实体识别结果,包括:
根据每个字符的第二字向量和所述实体词的第一词向量,通过实体识别模型对所述对象主题文本进行实体识别,得到实体识别结果,所述实体识别模型是基于所述实体词表得到的标注数据集训练得到。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京达佳互联信息技术有限公司,未经北京达佳互联信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110701796.3/1.html,转载请声明来源钻瓜专利网。