[发明专利]命名实体识别方法、装置、设备及计算机可读存储介质在审
申请号: | 202110098586.X | 申请日: | 2021-01-25 |
公开(公告)号: | CN113011186A | 公开(公告)日: | 2021-06-22 |
发明(设计)人: | 吴坤 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F40/295 | 分类号: | G06F40/295 |
代理公司: | 北京派特恩知识产权代理有限公司 11270 | 代理人: | 高天华;张颖玲 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 命名 实体 识别 方法 装置 设备 计算机 可读 存储 介质 | ||
1.一种命名实体识别方法,其特征在于,包括:
获取待识别文本的多个字符;
确定所述多个字符中每一所述字符对应的字符向量集合;所述字符向量集合包括所述字符在多种语义维度下的向量;所述多种语义维度至少包括词汇维度和实体维度;
基于每一所述字符对应的字符向量集合,生成每一所述字符对应的实体字符向量;所述实体字符向量用于表征所述字符对应的实体信息;
根据每一所述字符对应的实体字符向量,确定所述待识别文本中的实体文本和所述实体文本的实体类型。
2.根据权利要求1所述的方法,其特征在于,所述字符向量集合包括所述字符对应的字特征向量;所述获取所述多个字符中每一所述字符对应的字符向量集合,包括:
将所述待识别文本输入预设的第一语言模型中,通过所述第一语言模型获取所述每一所述字符对应的字特征向量;所述字特征向量包括所述字符对应的字符向量、位置向量和片段向量。
3.根据权利要求2所述的方法,其特征在于,所述字符向量集合还包括所述字符对应的词特征向量;所述获取所述多个字符中每一所述字符对应的字符向量集合,还包括:
提取所述待识别文本中的至少一个待识别词的词边界信息;
基于所述至少一个待识别词的词边界信息,生成每一所述字符对应的词特征向量。
4.根据权利要求3所述的方法,其特征在于,所述词特征向量包括所述词汇边界向量;
所述提取所述待识别文本中的至少一个待识别词的词边界信息,包括:对所述待识别文本进行分词,得到所述待识别文本中的至少一个待识别词汇的词汇边界信息;
所述基于所述至少一个待识别词的词边界信息,生成每一所述字符对应的词特征向量,包括:基于所述至少一个待识别词汇的词汇边界信息,生成每一所述字符对应的词汇边界向量;所述词汇边界向量用于表征所述字符在与所述字符对应的待识别词汇中的位置。
5.根据权利要求4所述的方法,其特征在于,所述词特征向量还包括所述实体边界向量;
所述提取所述待识别文本中的至少一个待识别词的词边界信息,还包括:根据预设的实体词典,获取所述待识别文本中的至少一个待识别实体的实体分割信息;
所述基于所述至少一个待识别词的词边界信息,生成每一所述字符对应的词特征向量,还包括:基于所述至少一个待识别词汇的实体分割信息,生成每一所述字符对应的实体边界向量;所述实体边界向量用于表征所述字符在与所述字符对应的待识别词汇中的位置。
6.根据权利要求5所述的方法,其特征在于,所述基于每一所述字符对应的字符向量集合,生成每一所述字符对应的实体字符向量,包括:
将每一所述字符对应的字符向量集合输入至预设的第二语言模型中,得到所述第二语言模型输出的每一所述字符对应的实体字符向量。
7.根据权利要求6所述的方法,其特征在于,所述将每一所述字符对应的字符向量集合输入至预设的第二语言模型中,得到所述第二语言模型输出的每一所述字符对应的实体字符向量,包括:
获取所述字符向量集合对应的权重参数;所述权重参数包括所述字符向量集合中每一所述维度对应的权重;
根据每一所述维度对应的权重,对所述字符在不同维度下的字符向量进行融合,得到待输入字符向量;
将每一所述字符对应的待输入字符向量输入至预设的第二语言模型中,得到所述第二语言模型输出的每一所述字符对应的实体字符向量。
8.根据权利要求6所述的方法,其特征在于,所述根据每一所述字符对应的实体字符向量,从所述待识别文本中提取实体文本,包括:
根据每一所述字符对应的实体字符向量构建每一所述字符对应的字符特征向量;
将每一所述字符对应的字符特征向量输入至预设的第三语言模型中,得到每一所述字符对应的实体文本分割结果;所述实体文本分割结果包括实体边界信息和实体类型信息;
根据每一所述字符对应的实体边界信息和实体类型信息,获取所述待识别文本中的实体文本和所述实体文本的实体类型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110098586.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种多层复合结构载药气道支架及其制备方法
- 下一篇:一种矿山边坡防护装置