[发明专利]一种姿态参数估算方法、装置、电子设备及计算机可读存储介质

说明书

本发明的实施例提供了一种姿态参数估算方法、装置、电子设备及计算机可读存储介质，所述方法包括：依据用户的表情，调整用户的3D人脸模型中各语义点的位置，并确定调整位置后的各语义点的第一坐标；确定用户处于无表情状态下，用户的3D人脸模型中各语义点的第二坐标；计算每个语义点的第一坐标相较于第二坐标的位移量；基于位移量，确定语义点对应区域的区域位移量；依据区域位移量，确定区域的权重向量；依据权重向量和姿态算法，确定用户的姿态参数。考虑了表情对姿态的影响，依据语义点的位移量，自适应地分配人脸不同区域在求解姿态时的权重向量，从而可以消除表情对姿态求解的影响，使得求解出的姿态和真人姿态十分吻合。

技术领域

本发明涉及计算机视觉领域，具体而言，涉及一种姿态参数估算方法、装置、电子设备及计算机可读存储介质。

背景技术

在表情驱动任务中，需要同时解算出面部表情和头部姿态，如此才可以驱动虚拟形象做同样的表情动作和姿态。

现有的表情驱动解算算法未考虑表情对姿态的影响，导致解算出来的姿态是耦合了表情的，比如嘴巴做歪嘴动作时(表情)，头也会歪向一边(姿态)，但真实的动作应该是只有歪嘴的表情，头部姿态不动。

因此，现有技术中无法消除表情对姿态的影响，从而导致求解出的姿态和真人姿态不吻合。

发明内容

本发明的目的包括，例如，提供了一种姿态参数估算方法、装置、电子设备及计算机可读存储介质，其能够消除表情对姿态的影响，从而使得求解出的姿态和真人姿态吻合。

为了实现上述目的，本申请实施例采用的技术方案如下：

第一方面，本申请实施例提供了一种姿态参数估算方法，所述方法包括：

依据用户的表情，调整用户的3D人脸模型中各语义点的位置，并确定调整位置后的各语义点的第一坐标；

确定用户处于无表情状态下，用户的3D人脸模型中各语义点的第二坐标；

计算每个语义点的所述第一坐标相较于所述第二坐标的位移量；

基于所述位移量，确定所述语义点对应区域的区域位移量，其中，所述3D人脸模型划分为多个区域，不同区域包含不同语义点；

依据所述区域位移量，确定所述区域的权重向量；

依据所述权重向量和姿态算法，确定所述用户的姿态参数。

在可选的实施方式中所述依据用户的表情，调整用户的3D人脸模型中各语义点的位置，并确定调整位置后的各语义点的第一坐标的步骤，包括：

确定用户的表情对应的第一2D图像；

确定所述第一2D图像中各关键点的第三坐标；

确定用户在无表情状态下，用户的第二2D图像中各关键点的第四坐标；

针对每个所述关键点，依据所述第三坐标和所述第四坐标，计算各关键点的移动值；

依据每个关键点的所述移动值，调整用户的3D人脸模型中各语义点的位置，其中，所述关键点与所述语义点对应。

在可选的实施方式中，所述基于所述位移量，确定所述语义点对应区域的区域位移量的步骤，包括：

确定所述区域中各语义点的位移量；

计算各语义点的位移量的和；

计算和的平均值，作为所述语义点对应区域的区域位移量。

在可选的实施方式中，所述依据所述区域位移量，确定所述区域的权重向量的步骤，包括：

将所述区域位移量与预设位移量进行比较；