[发明专利]一种三维脸部模型建立方法、装置和电子设备

权利要求书

1.一种三维脸部模型建立方法，其特征在于，所述方法包括：

根据获取的脸部图像建立基础三维脸部模型；

获取所述基础三维脸部模型相对于所述脸部图像的深度增量图；

将所述深度增量图投射至所述基础三维脸部模型的表面，得到细节三维脸部模型。

2.根据权利要求1所述的方法，其特征在于，所述根据获取的脸部图像建立基础三维脸部模型，包括：

通过已训练的参数提取网络获取所述脸部图像的脸部特征参数；所述脸部特征参数包括以下参数中的至少一种：形状参数、表情参数和纹理参数；

根据所述脸部特征参数建立基础三维脸部模型。

3.根据权利要求2所述的方法，其特征在于，所述参数提取网络的训练过程包括：

将获取的训练样本集中的脸部样本图像输入可训练的参数提取网络，得到所述脸部样本图像的脸部特征参数、光照参数和姿势参数；

根据所述脸部样本图像的脸部特征参数建立所述脸部样本图像对应的基础三维脸部模型；

根据所述脸部样本图像的光照参数和姿势参数，对所述脸部样本图像对应的基础三维脸部模型进行渲染处理，得到所述脸部样本图像对应的二维重构图像；

将所述脸部样本图像与所述二维重构图像进行对比，确定第一损失值；

根据第一损失值调整所述参数提取网络的网络参数，并利用调整后的参数提取网络重新提取所述根据所述脸部样本图像的脸部特征参数、光照参数和姿势参数；

直至所述第一损失值收敛至预设的期望值时，获得已训练的参数提取网络。

4.根据权利要求3所述的方法，其特征在于，所述将所述脸部样本图像与所述二维重构图像进行对比，确定第一损失值，包括：

获取所述脸部样本图像与所述二维重构图像之间的差异，所述差异包括以下至少一种或组合：脸部关键点的位置差异、像素点的像素值差异、特征向量差异；所述脸部关键点的位置差异指相互对应的脸部关键点在所述脸部样本图像与所述二维重构图像中的位置差异；所述像素点的像素值差异指相互对应的像素点在所述脸部样本图像与所述二维重构图像中的像素值差异；所述特征向量差异指所述脸部样本图像的特征向量与所述二维重构图像的特征向量之间的差异；

根据所述脸部样本图像与所述二维重构图像之间的差异确定第一损失值。

5.根据权利要求4所述的方法，其特征在于，所述脸部样本图像与所述二维重构图像之间的差异包括脸部关键点的位置差异、像素点的像素值差异和特征向量差异；

所述根据所述脸部样本图像与所述二维重构图像之间的差异确定第一损失值，包括：

根据所述脸部关键点的位置差异、所述像素点的像素值差异和所述特征向量差异以及各差异对应的权重确定第一损失值。

6.根据权利要求1所述的方法，其特征在于，所述获取所述基础三维脸部模型相对于所述脸部图像的深度增量图，包括：

获取所述基础三维脸部模型在UV空间上的第一二维图片以及所述脸部图像在所述UV空间上的第二二维图片；

将所述第一二维图片和所述第二二维图片输入已训练的图片生成网络，得到所述深度增量图。