[发明专利]实体识别方法、装置、存储介质和电子设备有效
申请号: | 202010974867.2 | 申请日: | 2020-09-16 |
公开(公告)号: | CN112115709B | 公开(公告)日: | 2021-06-04 |
发明(设计)人: | 赵华宇;胡思琦;闫鹏;高仕才 | 申请(专利权)人: | 北京嘀嘀无限科技发展有限公司 |
主分类号: | G06F40/279 | 分类号: | G06F40/279;G06F40/247;G06F16/31;G06F16/33 |
代理公司: | 北京睿派知识产权代理事务所(普通合伙) 11597 | 代理人: | 刘锋 |
地址: | 100193 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 实体 识别 方法 装置 存储 介质 电子设备 | ||
1.一种实体识别方法,其特征在于,所述方法包括:
确定目标领域对应的标准实体名称索引和同义词库,所述标准实体名称索引用于搜索目标领域的标准实体名称,所述同义词库中包括多个目标领域对应的实体名称组,各所述实体名称组中包括多个含义相同的实体名称;
确定待识别的第一实体文本对应的第一词集合,所述第一词集合中包括对所述第一实体文本分词后得到的多个第一实体名称;
基于所述标准实体名称索引对第一实体文本进行搜索,以确定至少一个标准实体文本以及各所述标准实体文本对应的标准词集合,所述标准词集合中包括对标准实体文本分词后得到的多个第二实体名称;
根据各所述标准词集合在所述同义词库中确定所述第一词集合中各所述第一实体名称对应的标准实体名称,以确定对应的第二词集合,所述标准实体名称为第一实体名称在同义词库中的同义词,且与所述标准词集合中的一个第二实体名称相同;
计算各所述标准词集合和对应的第二词集合的相似度,以确定目标标准词集合对应的标准实体文本为识别得到的第二实体文本。
2.根据权利要求1所述的方法,其特征在于,所述确定目标领域对应的标准实体名称索引和同义词库包括:
确定目标领域对应的专用实体文本集合以及标准实体文本集合;
根据所述专用实体文本集合确定同义词库;
根据所述专用实体文本集合、标准实体文本集合和同义词库确定标准实体名称索引。
3.根据权利要求2所述的方法,其特征在于,所述根据所述专用实体文本集合、标准实体文本集合和同义词库确定标准实体名称索引包括:
对所述专用实体文本集合中各所述专用实体文本进行分词处理,以确定所述目标领域对应的专用实体名称集合;
根据所述同义词库、专用实体名称集合和标准实体文本集合确定标准实体名称索引。
4.根据权利要求1所述的方法,其特征在于,所述确定待识别的第一实体文本对应的第一词集合包括:
确定待识别的第一实体文本;
对所述第一实体文本进行分词处理,以根据分词后得到的多个第一实体名称确定第一词集合。
5.根据权利要求1所述的方法,其特征在于,所述基于所述标准实体名称索引对第一实体文本进行搜索,以确定至少一个标准实体文本以及各所述标准实体文本对应的标准词集合包括:
基于所述标准实体名称索引对第一实体文本进行搜索,以确定至少一个标准实体文本;
对各所述标准实体文本进行分词处理,以得到包括多个第二实体名称的标准词集合,所述第二实体名称为标准实体文本分词得到的标准实体名称。
6.根据权利要求1所述的方法,其特征在于,所述根据各所述标准词集合在所述同义词库中确定所述第一词集合中各所述第一实体名称对应的标准实体名称,以确定对应的第二词集合包括:
确定目标标准词集合;
在所述同义词库中确定各所述第一实体名称对应的至少一个同义词;
响应于存在与所述目标标准词集合中第二实体名称相同的同义词,通过所述同义词替换对应的第一实体名称以确定对应的第二词集合。
7.根据权利要求1所述的方法,其特征在于,所述计算各所述标准词集合和对应的第二词集合的相似度,以确定目标标准词集合对应的标准实体文本为识别得到的第二实体文本包括:
确定各所述标准词集合对应的标准向量,以及对应的第二词集合对应的同义向量,所述标准向量用于表征对应的标准词集合,所述同义向量用于表征对应的第二词集合;
计算各所述标准向量和对应的同义向量的相似度,以确定目标标准向量对应的标准词集合为目标标准词集合;
确定所述目标标准词集合对应的标准实体名称为识别得到的第二实体文本。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京嘀嘀无限科技发展有限公司,未经北京嘀嘀无限科技发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010974867.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种物联网智能终端设备隐私数据防护系统
- 下一篇:污泥干料输送系统及工艺