[发明专利]键值匹配方法、装置、可读介质及电子设备在审
申请号: | 202111494112.3 | 申请日: | 2021-12-08 |
公开(公告)号: | CN114153959A | 公开(公告)日: | 2022-03-08 |
发明(设计)人: | 赵田雨;陈露露;黄灿 | 申请(专利权)人: | 北京有竹居网络技术有限公司 |
主分类号: | G06F16/332 | 分类号: | G06F16/332;G06V30/146;G06V30/148;G06V30/19;G06K9/62 |
代理公司: | 北京英创嘉友知识产权代理事务所(普通合伙) 11447 | 代理人: | 贺晓蕾 |
地址: | 101299 北京市平*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 键值 匹配 方法 装置 可读 介质 电子设备 | ||
1.一种键值匹配方法,其特征在于,所述方法包括:
获取待检测图像,所述待检测图像包括至少一个属性数据和至少一个属性值数据;
将所述待检测图像输入预设键值匹配模型,以使所述预设键值匹配模型输出所述属性数据与所述属性值数据的匹配关系;
其中,所述预设键值匹配模型包括语义分割子模型,以及与所述语义分割子模型耦合的图匹配子模型;
所述语义分割子模型,用于获取所述待检测图像中的文本覆盖区域,文本中心区域,属性数据区域,以及属性值数据区域,根据所述文本覆盖区域,所述文本中心区域,以及所述属性数据区域确定目标属性数据区域,并根据所述文本覆盖区域,所述文本中心区域,以及所述属性值数据区域确定目标属性值数据区域;
所述图匹配子模型,用于根据所述目标属性数据区域和所述目标属性值数据区域确定所述待检测图像中所述属性数据与所述属性值数据的匹配关系。
2.根据权利要求1所述的方法,其特征在于,所述语义分割子模型,用于:
按照预设倍数对所述文本中心区域进行等比扩大,以得到扩大后的目标文本中心区域,获取所述目标文本中心区域与所述文本覆盖区域的第一交集区域,并获取所述第一交集区域与所述属性数据区域的第二交集区域,将所述第二交集区域作为所述目标属性数据区域,并获取所述第一交集区域与所述属性值数据区域的第三交集区域,将所述第三交集区域作为所述目标属性值数据区域。
3.根据权利要求1所述的方法,其特征在于,所述图匹配子模型,用于:
根据所述目标属性数据区域建立第一关系图,并根据所述目标属性值数据区域建立第二关系图,根据所述第一关系图和所述第二关系图确定所述待检测图像中所述属性数据与所述属性值数据的匹配关系;
其中,所述第一关系图包括每个目标属性数据区域对应的属性节点和不同的所述属性节点之间的第一连线,所述第二关系图包括每个目标属性值数据区域对应的属性值节点,以及不同的所述属性值节点之间的第二连线。
4.根据权利要求3所述的方法,其特征在于,所述预设键值匹配模型还包括特征提取子模型,所述特征提取子模型分别与所述语义分割子模型和所述图匹配子模型耦合;
所述特征提取子模型,用于通过降采样的方式获取所述待检测图像对应的第一特征图,并将所述第一特征图输入所述语义分割子模型,以使所述语义分割子模型根据所述第一特征图确定所述待检测图像中的所述文本覆盖区域,所述文本中心区域,所述属性数据区域,以及所述属性值数据区域;
所述特征提取子模型,还用于获取所述待检测图像对应的第二特征图和第三特征图,并将所述第二特征图和所述第三特征图输入所述图匹配子模型,使所述图匹配子模型根据所述第二特征图,所述第三特征图,所述第一关系图和所述第二关系图确定所述待检测图像中所述属性数据与所述属性值数据的匹配关系,其中,所述第二特征图对应的网络深度浅于所述第三特征图对应的网络深度。
5.根据权利要求4所述的方法,其特征在于,所述图匹配子模型用于:
从所述第二特征图中提取所述第一关系图中每个所述属性节点对应的第一特征,并从所述第三特征图中提取每条所述第一连线对应的第二特征,从所述第二特征图中提取所述第二关系图中每个所述属性值节点对应的第三特征,并从所述第三特征图中提取每条所述第二连线对应的第四特征,根据每个所述属性节点对应的第一特征和每条所述第一连线对应的第二特征,以及每个所述属性值节点对应的第三特征和每条所述第二连接对应的第四特征确定所述属性数据与所述属性值数据的匹配关系。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京有竹居网络技术有限公司,未经北京有竹居网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111494112.3/1.html,转载请声明来源钻瓜专利网。