[发明专利]图文匹配结果确定方法、装置、电子设备及可读存储介质有效
申请号: | 202110826689.3 | 申请日: | 2021-07-21 |
公开(公告)号: | CN113688269B | 公开(公告)日: | 2023-05-02 |
发明(设计)人: | 叶蕊;张庆;宾义;黄君实;王福龙;罗恒亮 | 申请(专利权)人: | 北京三快在线科技有限公司 |
主分类号: | G06F16/583 | 分类号: | G06F16/583;G06F16/36;G06N3/02;G06N3/08 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 任亚娟 |
地址: | 100083 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图文 匹配 结果 确定 方法 装置 电子设备 可读 存储 介质 | ||
1.一种图文匹配结果确定方法,其特征在于,包括:
获取目标业务方,及与所述目标业务方关联的目标图像;
根据实体关联列表,获取所述目标业务方的业务方名称对应的第一实体识别结果和所述目标图像对应的第二实体识别结果的语义关联关系,根据所述语义关联关系,确定所述目标业务方和所述目标图像的第一图文匹配结果,所述实体关联列表是指预先构建的用于指示实体关联关系的列表;
基于预先训练的图文相关性模型,获取所述业务方名称对应的第一向量和所述目标图像对应的第二向量,根据所述第一向量和所述第二向量,计算得到所述业务方名称和所述目标图像的相关性分值,并根据所述相关性分值,确定所述目标业务方和所述目标图像的第二图文匹配结果;
在所述第一图文匹配结果和所述第二图文匹配结果中存在至少一个匹配不一致结果的情况下,基于预先构建的知识图谱,确定所述目标业务方和所述目标图像的目标图文匹配结果。
2.根据权利要求1所述的方法,其特征在于,所述根据实体关联列表,获取所述目标业务方的业务方名称对应的第一实体识别结果和所述目标图像对应的第二实体识别结果的语义关联关系,根据所述语义关联关系,确定所述目标业务方和所述目标图像的第一图文匹配结果,包括:
对所述业务方名称进行实体识别处理,得到所述业务方名称对应的第一实体识别结果;
对所述目标图像中包含的目标业务对象进行实体识别处理,得到所述目标图像对应的第二实体识别结果;
根据实体关联列表,获取所述第一实体识别结果和所述第二实体识别结果的语义关联关系;
根据所述语义关联关系,确定所述第一图文匹配结果。
3.根据权利要求1所述的方法,其特征在于,所述基于预先训练的图文相关性模型,获取所述业务方名称和所述目标图像的相关性分值,包括:
将所述业务方名称和所述目标图像输入至所述图文相关性模型;
调用所述图文相关性模型获取所述业务方名称对应的第一向量,及所述目标图像对应的第二向量,并根据所述第一向量和所述第二向量,计算得到所述业务方名称和所述目标图像的相关性分值。
4.根据权利要求1所述的方法,其特征在于,在所述根据所述相关性分值,确定所述目标业务方和所述目标图像的第二图文匹配结果之后,还包括:
在所述第一图文匹配结果和所述第二图文匹配结果均为图文匹配一致的结果的情况下,确定所述目标业务方和所述目标图像的图文匹配结果为匹配一致的结果。
5.根据权利要求1所述的方法,其特征在于,在所述基于预先构建的知识图谱,确定所述目标业务方和所述目标图像的目标图文匹配结果之前,还包括:
根据业务方和业务对象的历史共现数据,构建初始知识图谱;
根据所述业务方和所述业务对象的共现次数,确定所述业务方与所述业务对象的共现概率;
将所述共现概率赋予所述初始知识图谱,生成所述知识图谱。
6.根据权利要求5所述的方法,其特征在于,所述基于预先构建的知识图谱,确定所述目标业务方和所述目标图像的目标图文匹配结果,包括:
根据所述知识图谱,获取所述业务方名称和所述目标图像中的目标业务对象的目标共现概率;
根据所述目标共现概率,确定所述目标图文匹配结果。
7.根据权利要求6所述的方法,其特征在于,所述根据目标共现概率,确定所述目标图文匹配结果,包括:
根据所述知识图谱,获取所述目标业务方和与所述目标业务方具有连接关系的其它业务对象之间的初始共现概率;
根据所述初始共现概率和所述目标共现概率,对所述目标业务对象和所述其它业务对象进行排序;
根据排序结果,确定所述目标业务方和所述目标图像的目标图文匹配结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京三快在线科技有限公司,未经北京三快在线科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110826689.3/1.html,转载请声明来源钻瓜专利网。