[发明专利]三维手部识别方法、装置、电子设备及存储介质

说明书

本实施例提供的三维手部识别方法、装置、电子设备及存储介质，通过先识别获得手部的二维关节点坐标，再利用转换模型对这些关节点坐标进行从二维至三维的坐标转换，进而得到手部在三维坐标系下的各关节点坐标，并基于此建立三维手部模型。通过这样的方式，能够将二维图像中的手势或手型，以三维手部模型的方式进行呈现，其可广泛运用于各类基于三维手部模型进行控制的场景，控制的灵活性得到有效提高。

技术领域

本公开实施例涉及图像处理领域，尤其涉及一种三维手部识别方法、装置、电子设备及存储介质。

背景技术

对于图像中手势或手型的进行手部识别广泛运用在各类场景交互中。随着机器学习算法的发展，利用神经网络模型对图像中出现的手部进行自动识别成为可能。

在现有技术中，需要通过图像采集设备对手势或手型进行图像采集获得待识别图像，基于神经网络模型对待识别图像中的手型或手势进行识别，其中的待识别图像是二维图像，而获得的识别结果也为手型或手势在二维平面上的投影。

但是，随着智能领域的发展，基于三维的手势或手型也可应用于与设备的交互中，因此，亟需一种可识别三维手势或手型的方法，以满足应用需求。

发明内容

针对上述问题，本公开提供了一种三维手部识别方法、装置、电子设备及存储介质。

第一方面，本公开实施例提供一种三维手部识别方法，包括：

获得待识别的手部图像；

利用手部二维关节点识别模型，对所述待识别的手部图像进行处理，获得手部在二维图像坐标系下的各关节点坐标；

利用手部三维关节点转换模型对手部在二维图像坐标系下的各关节点坐标进行转换，获得手部在三维坐标系下的各关节点坐标；

根据所述手部在三维坐标系下的各关节点坐标，生成并输出三维手部模型。

第二方面，本公开实施例提供一种三维手部识别装置，包括:

获取模块，用于获得待识别的手部图像；

识别模块，用于利用手部二维关节点识别模型，对所述待识别的手部图像进行处理，获得手部在二维图像坐标系下的各关节点坐标；

转换模块，用于利用手部三维关节点转换模型对手部在二维图像坐标系下的各关节点坐标进行转换，获得手部在三维坐标系下的各关节点坐标；

建模模块，用于根据所述手部在三维坐标系下的各关节点坐标，生成并输出三维手部模型。

第三方面，本公开实施例提供一种电子设备，包括：至少一个处理器和存储器；

所述存储器存储计算机执行指令；

所述至少一个处理器执行所述存储器存储的计算机执行指令，使得所述至少一个处理器执行如上第一方面以及第一方面各种可能的涉及的所述的三维手部识别方法。

第四方面，本公开实施例提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，当处理器执行所述计算机执行指令时，实现如上第一方面以及第一方面各种可能的涉及的所述的三维手部识别方法。

本实施例提供的三维手部识别方法、装置、电子设备及存储介质，通过先识别获得手部的二维关节点坐标，再利用转换模型对这些关节点坐标进行从二维至三维的坐标转换，进而得到手部在三维坐标系下的各关节点坐标，并基于此建立三维手部模型。通过这样的方式，能够将二维图像中的手势或手型，以三维手部模型的方式进行呈现，其可广泛运用于各类基于三维手部模型进行控制的场景，控制的灵活性得到有效提高。

附图说明