[发明专利]基于三维重建的人脸修饰方法、装置、设备及存储介质

权利要求书

1.一种基于三维重建的人脸修饰方法，其特征在于，包括：

从原始人脸图像中确定目标修饰区域；

对所述目标修饰区域进行三维重建，得到所述目标修饰区域所对应的三维空间信息；

根据所述三维空间信息对所述目标修饰区域进行着色处理，得到修饰后的人脸图像；

其中，所述的从原始人脸图像中确定目标修饰区域，包括：根据预设人脸关键点检测模型从原始人脸图像中确定人脸关键点信息；根据所述人脸关键点信息从所述原始人脸图像中分离出待修饰区域,所述待修饰区域为所述目标修饰区域；

所述的对所述目标修饰区域进行三维重建，得到所述目标修饰区域所对应的三维空间信息，包括：获取所述人脸关键点信息和所述目标修饰区域对应的用于表征所述目标修饰区域的三维空间坐标点集的基础参数以及所述基础参数所对应的权重系数；根据所述基础参数确定与所述基础参数匹配的预设三维基础模型；通过所述权重系数对所述预设三维基础模型进行加权处理，得到所述目标修饰区域对应的三维空间信息。

2.根据权利要求1所述的方法，其特征在于，还包括：

获取标注有人脸关键点的图像样本数据；

通过所述图像样本数据对初始人脸关键点检测模型进行神经网络训练，得到预设人脸关键点检测模型。

3.根据权利要求1所述的方法，其特征在于，所述的根据所述三维空间信息对所述目标修饰区域进行着色处理，得到修饰后的人脸图像，包括：

根据所述三维空间信息对所述目标修饰区域进行着色处理，得到三维纹理着色结果；

将所述三维纹理着色结果替换到所述原始人脸图像的所述目标修饰区域上，得到修饰后的人脸图像。

4.根据权利要求3所述的方法，其特征在于，所述的根据所述三维空间信息对所述目标修饰区域进行着色处理，得到三维纹理着色结果，包括：

根据所述三维空间信息确定所述目标修饰区域对应的三维剖分网格；

将纹理对应坐标的颜色迁移到所述三维剖分网格所对应的坐标位置，得到三维纹理着色结果。

5.根据权利要求4所述的方法，其特征在于，所述的根据所述三维空间信息确定所述目标修饰区域对应的三维剖分网格，包括：

对所述三维空间信息进行三角剖分，得到所述目标修饰区域对应的三维剖分网格。

6.根据权利要求5所述的方法，其特征在于，所述的对所述三维空间信息进行三角剖分，得到所述目标修饰区域对应的三维剖分网格，包括：

对所述三维空间信息进行最邻近的无交叉三角剖分，得到所述目标修饰区域对应的三维剖分网格。

7.根据权利要求3所述的方法，其特征在于，所述的将所述三维纹理着色结果替换到所述原始人脸图像的所述目标修饰区域上，得到修饰后的人脸图像，包括：

对所述目标修饰区域的边缘区域做羽化处理，得到修饰后的人脸图像。

8.一种基于三维重建的人脸修饰装置，其特征在于，包括：

修饰目标确定单元，用于从原始人脸图像中确定目标修饰区域；

第一处理单元，用于对所述目标修饰区域进行三维重建，得到所述目标修饰区域所对应的三维空间信息；

第二处理单元，用于根据所述三维空间信息对所述目标修饰区域进行着色处理，得到修饰后的人脸图像；

所述修饰目标确定单元，还具体用于根据预设人脸关键点检测模型从原始人脸图像中确定人脸关键点信息；根据所述人脸关键点信息从所述原始人脸图像中分离出待修饰区域,所述待修饰区域为所述目标修饰区域；

所述第一处理单元，还具体用于获取所述人脸关键点信息和所述目标修饰区域对应的用于表征所述目标修饰区域的三维空间坐标点集的基础参数以及所述基础参数所对应的权重系数；根据所述基础参数确定与所述基础参数匹配的预设三维基础模型；通过所述权重系数对所述预设三维基础模型进行加权处理，得到所述目标修饰区域对应的三维空间信息。