[发明专利]三维人脸的重建方法、装置、电子设备以及存储介质

权利要求书

1.一种三维人脸的重建方法，其特征在于，所述方法包括：

获取待重建人脸的形状参数和纹理参数；

将所述形状参数输入第一模型，获得所述第一模型输出的三维人脸形状；

将所述纹理参数输入第二模型，获得所述第二模型输出的人脸纹理贴图，其中，所述第一模型和所述第二模型中的至少一个基于生成对抗网络训练获得；

基于所述三维人脸形状和所述人脸纹理贴图，生成目标三维人脸，其中，所述目标三维人脸包括基于所述人脸纹理贴图生成的纹理信息。

2.根据权利要求1所述的方法，其特征在于，所述第一模型为已训练的生成对抗网络，所述将所述形状参数输入第一模型，获得所述第一模型输出的三维人脸形状，包括：

将所述形状参数输入所述已训练的生成对抗网络，获得所述已训练的生成对抗网络输出的人脸坐标贴图；

基于所述人脸坐标贴图，获得所述三维人脸形状。

3.根据权利要求1所述的方法，其特征在于，所述基于所述三维人脸形状和所述人脸纹理贴图，生成目标三维人脸之后，还包括：

基于渲染函数、相机参数和光照参数对所述目标三维人脸进行渲染，生成二维渲染人脸。

4.根据权利要求3所述的方法，其特征在于，所述基于渲染函数、相机参数和光照参数对所述目标三维人脸进行渲染，生成二维渲染人脸之后，还包括：

获取所述待重建人脸的姿态；

基于所述姿态和预设姿态的关系，计算所述待重建人脸以及目标三维人脸的关键点损失；

基于所述关键点损失对所述形状参数进行迭代优化，获得第一优化形状参数；

将所述第一优化形状参数作为新的形状参数输入所述第一模型。

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：

基于所述关键点损失对所述相机参数进行迭代优化，获得优化相机参数；

将所述优化相机参数作为新的相机参数进行所述目标三维人脸的渲染。

6.根据权利要求4所述的方法，其特征在于，所述获取所述待重建人脸的姿态，包括：

对所述待重建人脸进行关键点检测，获得所述待重建人脸的多个三维人脸关键点作为第一人脸关键点；

基于所述第一人脸关键点，获取所述待重建人脸的姿态。

7.根据权利要求6所述的方法，其特征在于，所述对所述待重建人脸进行关键点检测，获得所述待重建人脸的多个三维人脸关键点作为第一人脸关键点，包括：

对所述待重建人脸进行关键点检测，获得所述待重建人脸的多个三维人脸关键点作为第一人脸关键点，并获取所述待重建人脸的多个二维人脸关键点作为第二人脸关键点；

所述基于所述姿态和预设姿态的关系，计算所述待重建人脸和所述目标三维人脸的关键点损失，包括：

当所述姿态大于所述预设姿态时，获取所述目标三维人脸的多个三维人脸关键点作为第三人脸关键点，并计算所述第一人脸关键点和所述第三人脸关键点的关键点损失；

当所述姿态不大于所述预设姿态时，获取所述目标三维人脸的多个三维人脸关键点对应的多个二维人脸关键点作为第四人脸关键点，并计算所述第二人脸关键点和所述第四人脸关键点的关键点损失。

8.根据权利要求3所述的方法，其特征在于，所述基于渲染函数、相机参数和光照参数对所述目标三维人脸进行渲染，生成二维渲染人脸之后，还包括：

获取所述待重建人脸的生物特征信息作为第一生物特征信息，并获取所述二维渲染人脸的生物特征信息作为第二生物特征信息；

基于所述第一生物特征信息和所述第二生物特征信息，计算所述待重建人脸以及二维渲染人脸的生物特征损失；

基于所述生物特征损失对所述形状参数和所述纹理参数进行迭代优化，获得第二优化形状参数和第一优化纹理参数；

将所述第二优化形状参数作为新的形状参数输入所述第一模型，并将所述第一优化纹理参数作为新的纹理参数输入所述第二模型。