[发明专利]一种图像匹配方法及装置、电子设备、存储介质

说明书

本公开实施例公开了一种图像匹配方法，该方法包括：从不同视角的不同图像中获取至少两个匹配对象，以及至少两个匹配对象对应的至少两个二维姿态；基于预设外观识别网络确定至少两个匹配对象的外观相似性结果；根据至少两个二维姿态确定至少两个匹配对象的几何相似性结果；根据外观相似性结果和几何相似性结果确定目标相似性结果；基于预设约束条件对目标相似性结果进行全局一致性匹配求解，获得至少两个匹配对象的对应关系。本公开实施例的技术方案，结合外观和几何约束的方法衡量不同图像中人与人之间的相似性，并进一步基于约束条件进行匹配计算以获取不同图像中人物图像的对应关系，提高了匹配结果的准确性。

技术领域

本公开涉及计算机视觉技术领域，尤其涉及一种图像匹配方法及装置、电子设备、存储介质。

背景技术

目前，多视角下多人的三维姿态估计是计算机视觉领域的重要问题。多视角下多人的三维姿态估计可以应用到很多领域，例如，人机交互、视频交互，以及运动视频分析等。多视角图像中进行多人匹配是进行多视角下多人的三维姿态估计的基础，即根据不同视角图像的各个二维姿态，匹配出不同视角图像中同一个人。

在现有技术中，通常采用极几何约束和图形结构模型来匹配不同视角图像中的同一个人，然而，由于多视角图像中多人交互往往会存在严重的遮挡，同时，每个图像中获取的场景也是有限的，场景中的人数也是无法预测的，不同视角中的人也存在很大差异，因此，匹配结果的准确性较低。

发明内容

本公开实施例期望提供一种图像匹配方法及装置、电子设备、存储介质，结合外观和几何约束的方法衡量不同图像中人与人之间的相似性，并进一步基于约束条件进行匹配计算以获取不同图像中人物图像的对应关系，提高了匹配结果的准确性。

本公开实施例的技术方案是这样实现的：

本公开实施例提供了一种图像匹配方法，所述方法包括：

从不同视角的不同图像中获取至少两个匹配对象，以及所述至少两个匹配对象对应的至少两个二维姿态；

基于预设外观识别网络确定所述至少两个匹配对象的外观相似性结果；

根据所述至少两个二维姿态确定所述至少两个匹配对象的几何相似性结果；

根据所述外观相似性结果和所述几何相似性结果确定目标相似性结果；

基于预设约束条件对所述目标相似性结果进行全局一致性匹配求解，获得所述至少两个匹配对象的对应关系。

在上述方案中，所述基于预设外观识别网络确定所述至少两个匹配对象的外观相似性结果，包括：

将所述至少两个匹配对象中每一个匹配对象分别输入所述预设外观识别网络，获得所述至少两个匹配对象中每一个匹配对象对应的外观特征；

分别计算所述至少两个匹配对象中每一个匹配对象对应的外观特征，与所述至少两个匹配对象中不属于同一图像的每一个其它匹配对象对应的外观特征之间的欧式距离，获得至少一个距离结果；

按照第一预设映射方式对所述至少一个距离结果进行映射，获得所述外观相似性结果。

在上述方案中，所述根据所述至少两个二维姿态确定所述至少两个匹配对象的几何相似性结果，包括：

获取所述至少两个二维姿态中每一个二维姿态对应的子相似性结果；

根据所述子相似性结果组成所述几何相似性结果。

在上述方案中，所述获取所述至少两个二维姿态中每一个二维姿态对应的子相似性结果，包括：

获取第一二维姿态在所述不同图像包括的第一图像中对应的第一极线；其中，所述第一二维姿态为所述至少两个二维姿态中的任意一个二维姿态，且不属于所述第一图像；