[发明专利]一种实体对齐方法、装置、设备及介质有效
申请号: | 202110695614.6 | 申请日: | 2021-06-23 |
公开(公告)号: | CN113204643B | 公开(公告)日: | 2021-11-02 |
发明(设计)人: | 邓礼志;罗华刚;王展;于皓;张杰 | 申请(专利权)人: | 北京明略软件系统有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F40/295;G06F40/30 |
代理公司: | 北京超成律师事务所 11646 | 代理人: | 王晓菲 |
地址: | 100000 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 实体 对齐 方法 装置 设备 介质 | ||
本申请提供了一种实体对齐方法、装置、设备及介质,包括以下步骤:获取目标产品领域中产品的评论文本对应的至少一个类别下的识别实体;针对每个类别下的每一个识别实体,判断该识别实体是否属于该类别;若否,则删除该类别下的该识别实体;若是,则根据所述产品所属的目标产品领域,确定该识别实体对应的第一词向量和标准实体词库中该识别实体对应的类别下每个标准实体的第二词向量;根据所述第一词向量和第二词向量,从所述标准实体词库该类别下的标准实体中,确定与所述识别实体对齐的目标标准实体,从而提升目标产品领域中产品的评论文本中识别实体对齐的准确率。
技术领域
本申请涉及自然语言处理领域,具体而言,涉及一种实体对齐方法、装置、设备及介质。
背景技术
电商和社区分享类网站存在大量的产品评价内容,这些产品评价内容从各个产品的功能、效果、客户的需求等多方面全面而真实的反映了产品相关信息。有效理解产品评价内容,不仅能够丰富产品画像、优化网站的推荐系统,也能够提高品牌厂商对用户需求的理解、从而更好地营销和研发新产品。
实体对齐是有效理解产品评价内容过程中不可或缺的一环。原始的评论文本经过命名实体识别模块处理之后,得到了对评论文本对应的识别实体;在和已有的知识库进行融合打通之前,需要完成实体对齐,实体对齐的准确率对有效理解产品评价内容起着十分重要的作用。
发明内容
有鉴于此,本申请的目的在于提供一种实体对齐方法、装置、设备及介质,能够提高美妆数据中实体对齐的准确率。
本申请实施例提供的一种实体对齐方法,所述方法包括:
获取目标产品领域中产品的评论文本对应的至少一个类别下的识别实体;
针对每个类别下的每一个识别实体,判断该识别实体是否属于该类别;
若否,则删除该类别下的该识别实体;
若是,则根据所述产品所属的目标产品领域,确定该识别实体对应的第一词向量和标准实体词库中该识别实体对应的类别下每个标准实体的第二词向量;
根据所述第一词向量和第二词向量,从所述标准实体词库该类别下的标准实体中,确定与所述识别实体对齐的目标标准实体。
在一些实施例中,针对每个类别下的每一个识别实体,判断该识别实体是否属于该类别包括:同时将多个类别中的识别实体输入多个二分类模型,每个二分类模型对应一种类别的识别实体,判断该识别实体是否属于其对应类别;所述二分类模型通过目标产品领域中对应类别的训练集训练得到。
在一些实施例中,所述多个二分类模型的阈值不同,每个二分类模型的阈值通过目标产品领域中对应类别的训练集训练得到。
在一些实施例中,根据所述产品所属的目标产品领域,确定该识别实体对应的第一词向量和所述产品对应的标准实体词库中该识别实体相同类别下标准实体的第二词向量,包括:
利用训练好的词向量模型,得到识别实体对应的第一词向量和标准实体词库中该识别实体对应的类别下每个标准实体的第二词向量;所述训练好的词向量模型是通过产品所属的目标产品领域的训练集训练得到的。
在一些实施例中,根据所述第一词向量和第二词向量,从所述标准实体词库该类别下的标准实体中,确定与所述识别实体对齐的目标标准实体后,还包括:
若所述标准实体词库该类别下的标准实体中,不存与所述识别实体对齐的目标标准实体,则将所述识别实体作为候选识别实体;
对该类别下的候选识别实体进行聚类,得到若干个簇,所述簇中的候选识别实体均不满足预设离群条件;
根据所述簇中的候选识别实体,确定簇的标准实体及其类别,并将簇的标准实体作为与簇中候选识别实体对齐的目标标准实体。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京明略软件系统有限公司,未经北京明略软件系统有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110695614.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种治疗非洲猪瘟的口服液及其制备方法
- 下一篇:具有相位交错的多相转换器