[发明专利]三维手部识别方法、装置、电子设备及存储介质

权利要求书

1.一种三维手部识别方法，其特征在于，包括：

获得待识别的手部图像；

利用手部二维关节点识别模型，对所述待识别的手部图像进行处理，获得手部在二维图像坐标系下的各关节点坐标；

利用手部三维关节点转换模型对手部在二维图像坐标系下的各关节点坐标进行转换，获得手部在三维坐标系下的各关节点坐标；

根据所述手部在三维坐标系下的各关节点坐标，生成并输出三维手部模型；

所述手部三维关节点转换模型为残差网络模型；

所述残差网络模型由第一映射层、第一全连接层、第二全连接层以及第二映射层构成；其中，每一全连接层包括串联的两个全连接子模块；

所述利用手部三维关节点转换模型对手部在二维图像坐标系下的各关节点坐标进行转换，获得手部在三维坐标系下的各关节点坐标，包括：

将包括有手部在二维图像坐标系下的各关节点坐标输入至第一映射层，以使所述第一映射层将其映射为第一输入向量；

将所述第一输入向量输入至所述残差网络模型的第一全连接层中，以使所述第一全连接层中的两个全连接子模块依次对所述第一输入向量进行处理，得到第一处理向量；

将所述第一输入向量与所述第一处理向量进行叠加，得到所述第一全连接层输出的第一输出向量；

将第一输出向量将作为第二输入向量输入至所述残差网络模型的第二全连接层中，以使所述第二全连接层中的两个全连接子模块依次对所述第二输入向量进行处理，得到第二处理向量；

将所述第二输入向量与所述第二处理向量进行叠加，得到所述第二全连接层输出的第二输出向量；

将第二输出向量输入至第二映射层，以使所述第二映射层对所述第二输出向量进行映射，获得手部在三维坐标系下的各关节点坐标。

2.根据权利要求1所述的三维手部识别方法，其特征在于，还包括：

建立待训练的手部二维关节点识别模型，并获得手部二维关节点识别模型的训练样本；其中，所述手部二维关节点识别模型的训练样本包括：手部图像样本、以及手部图像样本中的手部在二维图像坐标系下的各关节点坐标；

利用所述手部二维关节点识别模型的训练样本对待训练的手部二维关节点识别模型进行训练，获得训练完毕的手部二维关节点识别模型。

3.根据权利要求1所述的三维手部识别方法，其特征在于，还包括：

建立待训练的手部三维关节点转换模型，并获得手部三维关节点转换模型的训练样本；其中，所述手部三维关节点转换模型的训练样本包括：手部在二维图像坐标系下的各关节点坐标，以及对应的手部在三维坐标系下的各关节点坐标；

利用所述手部三维关节点转换模型的训练样本对待训练的手部三维关节点转换模型进行训练，获得训练完毕的手部三维关节点转换模型。