[发明专利]关键点检测的方法、装置、电子设备及存储介质

说明书

本公开提供了一种关键点检测的方法、装置、电子设备及存储介质，该方法包括：确定包括目标对象的目标图像；对所述目标图像进行第一关键点检测，得到所述目标对象的关键位置信息；所述关键位置信息包括所述目标对象上的第一关键点信息，以及所述目标对象的至少一个目标部位分别对应的检测框的位置点信息；基于所述目标对象的每个所述目标部位对应的检测框的位置点信息，对每个所述目标部位在所述目标图像中的图像区域进行第二关键点检测，得到每个所述目标部位对应的第二关键点信息；基于所述第一关键点信息和所述第二关键点信息，确定所述目标对象的对象关键点信息。

技术领域

本公开涉及计算机视觉技术领域，具体而言，涉及一种关键点检测的方法、装置、电子设备及存储介质。

背景技术

近年来，关键点检测在视频分析中起到至关重要的作用，比如，在安防领域内，可以通过检测视频或图像中目标对象的脸部关键点，对该目标对象进行识别。

目前在虚拟现实、增强现实等应用场景中，需要对目标对象的多种关键点进行检测，以提高目标对象显示的真实性，比如，多种关键点可以包括肢体关键点、手势关键点、面部关键点等。因此，设计一种对关键点进行检测的方法至关重要。

发明内容

有鉴于此，本公开至少提供一种关键点检测的方法、装置、电子设备及存储介质。

第一方面，本公开提供了一种关键点检测的方法，包括：

确定包括目标对象的目标图像；

对所述目标图像进行第一关键点检测，得到所述目标对象的关键位置信息；所述关键位置信息包括所述目标对象上的第一关键点信息，以及所述目标对象的至少一个目标部位分别对应的检测框的位置点信息；

基于所述目标对象的每个所述目标部位对应的检测框的位置点信息，对每个所述目标部位在所述目标图像中的图像区域进行第二关键点检测，得到每个所述目标部位对应的第二关键点信息；

基于所述第一关键点信息和所述第二关键点信息，确定所述目标对象的对象关键点信息。

采用上述方法，考虑到如果在目标图像的全图上直接进行目标对象的各个部位的检测，目标对象的各个部位的特征在全图中的占比较小，很难关注目标对象的细粒度的特征，导致检测精度较低，而本公开提出两个阶段的关键点检测，在从目标图像中定位出目标对象后，通过第一关键点检测定位出目标对象的第一关键点信息以及至少一个目标部位的检测框的位置点信息，然后分别针对各个目标部位的图像区域进行更为粒度的第二关键点检测，从而可以得到更为准确的目标对象的对象关键点信息。

一种可能的实施方式中，所述对所述目标图像进行第一关键点检测，得到所述目标对象的关键位置信息，包括：

对所述目标图像进行第一卷积处理，得到第一特征图；

基于所述第一特征图，确定所述目标对象的关键位置信息；

所述基于所述目标对象的每个所述目标部位分别对应的检测框的位置点信息，对该目标部位在所述目标图像中的图像区域进行第二关键点检测，得到该目标部位对应的第二关键点信息，包括：

基于所述目标对象的每个所述目标部位分别对应的检测框的位置点信息，从所述第一特征图中截取与每个所述目标部位对应的第二特征图；

基于所述第二特征图，确定每个所述目标部位对应的第二关键点信息。

上述实施方式下，通过从对目标图像进行卷积处理后的第一特征图中截取每个目标部位对应的第二特征图，在该第二特征图的基础上进行第二关键点检测，相比于从目标图像中截取每个目标部位对应的图像，再进行处理，可以减少特征处理的次数，减少关键点检测的运算量。