[发明专利]图像处理方法、装置、电子设备及存储介质

说明书

本公开提供了一种图像处理方法、装置、电子设备及存储介质，其中，该方法包括：识别第一图像中的目标对象的目标区域；基于目标对象对应的目标区域，确定表征目标对象姿态的多个关键点分别在第一图像中的第一二维位置信息、每个关键点相对目标对象的参考节点的相对深度、以及目标对象的参考节点在相机坐标系中的绝对深度；基于目标对象的第一二维位置信息、相对深度、以及绝对深度，确定目标对象的多个关键点分别在相机坐标系中的三维位置信息。本公开能够基于目标对象的第一二维位置信息、相对于参考节点的相对深度、以及参考节点的绝对深度，更精确的得到目标对象的多个关键点分别在相机坐标系中的三维位置信息。

技术领域

本公开涉及图像处理技术领域，具体而言，涉及一种图像处理方法、装置、电子设备及存储介质。

背景技术

三维人体姿态检测计被广泛应用于安防、游戏、娱乐等领域。当前的三维人体姿态检测方法通常为识别人体关键点在图像中的第一二维位置信息，然后根据预先确定的人体关键点之间的位置关系，将第一二维位置信息转换为三维位置信息。

当前的三维人体姿态检测方法所得到的人体姿态存在较大的误差。

发明内容

本公开实施例至少提供一种图像处理方法、装置、电子设备及存储介质。

第一方面，本公开实施例提供了一种图像处理方法，包括：识别所述第一图像中的目标对象的目标区域；基于所述目标对象对应的目标区域，确定表征所述目标对象姿态的多个关键点分别在所述第一图像中的第一二维位置信息、每个所述关键点相对所述目标对象的参考节点的相对深度、以及所述目标对象的参考节点在相机坐标系中的绝对深度；基于所述目标对象的所述第一二维位置信息、所述相对深度、以及所述绝对深度，确定所述目标对象的多个关键点分别在所述相机坐标系中的三维位置信息。

这样，本公开实施例能够更精确的得到目标对象的多个关键点分别在相机坐标系中的三维位置信息，目标对象的多个关键点分别在相机坐标系中的三维位置信息能够表征目标对象的三维姿态，三维位置信息的精度越高，则得到的目标对象的三维姿态的精度也就越高。

一种可能的实施方式中，所述识别所述第一图像中的目标对象的目标区域，包括：对所述第一图像进行特征提取，得到所述第一图像的特征图；基于所述特征图，从预先生成的多个候选边界框中，确定多个目标边界框，并基于所述目标边界框，确定所述目标对象对应的目标区域。

这样，分为两步来确定目标对象的目标区域，能够精确的将各个目标对象在第一图像中的位置，从第一图像中检测出来，以提升后续关键点检测过程中的人体信息完整性、以及检测精度。

一种可能的实施方式中，所述基于所述目标边界框，确定所述目标对象对应的目标区域，包括：基于多个所述目标边界框，以及所述特征图，确定每个所述目标边界框对应的特征子图；基于多个所述目标边界框分别对应的特征子图进行边界框回归处理，得到所述目标对象对应的目标区域。

这样，对多个目标边界框分别对应的特征子图进行边界框回归处理，能够精确的将各个目标对象在第一图像中的位置从第一图像中检测出来。

一种可能的实施方式中，基于所述目标对象对应的目标区域，确定所述目标对象的参考节点在相机坐标系中的绝对深度，包括：基于所述目标对象对应的目标区域以及所述第一图像，确定所述目标对象对应的目标特征图；基于所述目标对象对应的目标特征图执行深度识别处理，得到所述目标对象的参考节点的归一化绝对深度；基于所述归一化绝对深度以及所述相机的参数矩阵，得到所述目标对象的参考节点在所述相机坐标系中的绝对深度。

这样，能够尽可能避免相机的内参不同所造成的直接基于目标特征图预测参考节点的绝对深度，所造成对不同相机在相同视角、相同位置获取的不同第一图像获取的绝对深度不同的情况。