[发明专利]文本处理方法、装置、电子设备及存储介质在审
申请号: | 202110614403.5 | 申请日: | 2021-06-02 |
公开(公告)号: | CN113821588A | 公开(公告)日: | 2021-12-21 |
发明(设计)人: | 毛铁峥;赵子元;颜强 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/33 | 分类号: | G06F16/33;G06F16/35;G06F16/36;G06F40/194;G06F40/279;G06F40/30 |
代理公司: | 深圳市智圈知识产权代理事务所(普通合伙) 44351 | 代理人: | 韩绍君 |
地址: | 518064 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文本 处理 方法 装置 电子设备 存储 介质 | ||
1.一种文本处理方法,其特征在于,包括:
确定查询文本相对于待匹配文本的匹配权重矩阵,所述匹配权重矩阵包括第一权重矩阵和第二权重矩阵中的至少一项,所述第一权重矩阵是根据所述查询文本中各分词所属的分词类别和所述待匹配文本中各分词所属的分词类别确定的,所述第二权重矩阵是根据所述查询文本中各分词与所述待匹配文本中各分词之间的关联关系确定的;
根据所述匹配权重矩阵,对所述查询文本相对于所述待匹配文本的相似度矩阵进行增强,得到第一相似度矩阵,所述查询文本相对于所述待匹配文本的相似度矩阵是根据所述查询文本中各分词的词向量和所述待匹配文本中各分词的词向量进行相似度计算得到的;
根据所述第一相似度矩阵确定所述查询文本与所述待匹配文本之间的匹配度分数;
根据所述查询文本与所述待匹配文本之间的匹配度分数确定目标匹配文本。
2.根据权利要求1所述的方法,其特征在于,所述匹配权重矩阵包括第一权重矩阵;所述确定查询文本相对于待匹配文本的匹配权重矩阵,包括:
识别所述查询文本中各分词所属的分词类别;
根据所述查询文本中各分词所属的分词类别、所述待匹配文本中各分词所属的分词类别和权重映射信息,确定所述查询文本中每一分词相对于所述待匹配文本中每一分词的第一权重;所述权重映射信息指示了与任意两分词类别相关联的第一权重;
组合所述查询文本中全部分词相对于所述待匹配文本中全部分词的第一权重,得到所述第一权重矩阵。
3.根据权利要求2所述的方法,其特征在于,所述识别所述查询文本中各分词所属的分词类别,包括:
获取第一实体链接信息,所述第一实体链接信息是将所述查询文本中的各分词在知识图谱中进行实体链接得到的;
将在知识图谱中为所述查询文本中的分词所链接到第一实体所属的分词类别,作为所述查询文本中的分词所属的分词类别。
4.根据权利要求1所述的方法,其特征在于,所述匹配权重矩阵包括第二权重矩阵;所述确定查询文本相对于待匹配文本的匹配权重矩阵,包括:
根据知识图谱识别所述查询文本中分词与所述待匹配文本中分词的关联关系;
根据所述关联关系进行权重查找,得到所述查询文本中分词相对于所述待匹配文本中分词的第二权重;
将所述查询文本中各分词相对于所述待匹配文本中各分词的第二权重进行组合,得到所述第二权重矩阵。
5.根据权利要求4所述的方法,其特征在于,所述根据知识图谱识别所述查询文本中分词与所述待匹配文本中分词的关联关系,包括:
获取第一实体链接信息,所述第一实体链接信息用于指示所述查询文本中的分词在所述知识图谱上所链接到的第一实体;
获取第二实体链接信息,所述第二实体链接信息用于指示所述待匹配文本中的分词在所述知识图谱上所链接到的第二实体;
将在所述知识谱图中所述第一实体与所述第二实体的关联关系,确定为所述查询文本中对应分词与所述待匹配文本中对应分词的关联关系。
6.根据权利要求1所述的方法,其特征在于,所述根据所述匹配权重矩阵对所述查询文本相对于所述待匹配文本的相似度矩阵进行增强,得到第一相似度矩阵,包括:
将所述匹配权重矩阵与所述相似度矩阵相乘,得到所述第一相似度矩阵。
7.根据权利要求1所述的方法,其特征在于,所述根据所述第一相似度矩阵确定所述查询文本与所述待匹配文本之间的匹配度分数,包括:
对所述第一相似度矩阵进行池化处理,得到第二相似度矩阵;
根据所述第二相似度矩阵,计算所述查询文本与所述待匹配文本之间的匹配度分数。
8.根据权利要求7所述的方法,其特征在于,所述根据所述第二相似度矩阵,计算所述查询文本与所述待匹配文本之间的匹配度分数,包括:
基于注意力机制对所述第二相似度矩阵进行注意力加权,得到第三相似度矩阵;
根据所述第三相似度矩阵进行分数预测,得到所述查询文本与所述待匹配文本之间的匹配度分数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110614403.5/1.html,转载请声明来源钻瓜专利网。