[发明专利]一种面部图像的换脸方法、装置、电子设备及存储介质

说明书

本公开实施例提供一种面部图像的换脸方法、装置、电子设备及存储介质。包括：对待换脸图像以及用于对待换脸图像进行换脸的指定图像进行三维面部重建，得到两个图像的三维的面部姿态信息和三维的面部关键点；将指定图像变形为面部姿态信息与待换脸图像相同的图像，作为第二指定图像；控制三维的面部关键点，对待换脸图像和第二指定图像进行预定的面部变形处理，得到三维的面部关键点匹配的两个图像；以面部变形处理后的第二指定图像的面部纹理，更新面部变形处理后的待换脸图像的面部纹理，得到换脸图像。本公开实施例提供的面部图像的换脸方法的鲁棒性较强，在指定图像与待换脸图像中的面部姿态不一致时，仍可实现对待换脸图像的换脸。

技术领域

本公开涉及图像处理技术领域，尤其涉及一种面部图像的换脸方法、装置、电子设备及存储介质。

背景技术

在图像处理技术领域，对面部图像进行换脸是一种常见的图像处理方法。

相关技术中，对面部图像进行换脸所采用的方法包括：分别对指定图像和待换脸图像进行预定的面部变形处理，得到二维的面部关键点匹配的指定图像和待换脸图像，以面部变形处理后的指定图像的面部纹理，更新面部变形处理后的待换脸图像的面部纹理，得到待换脸图像对应的换脸后的图像。

然而，当指定图像与待换脸图像中的面部姿态不一致时，如其中一个为正脸，另一个为侧脸时，难以变形得到面部轮廓以及五官位置均匹配的指定图像和待换脸图像，从而无法实现对待换脸图像的有效换脸。可见，相关技术中的面部图像的换脸方法，鲁棒性较低。

发明内容

本公开提供一种面部图像的换脸方法、装置、电子设备及存储介质，以提高面部图像的换脸方法的鲁棒性，从而在指定图像与待换脸图像中的面部姿态不一致时，也可实现对待换脸图像进行换脸。本公开的技术方案如下：

根据本公开实施例的第一方面，提供一种面部图像的换脸方法，包括：

获取待换脸图像以及用于对所述待换脸图像进行换脸的指定图像；

对所述待换脸图像以及所述指定图像进行三维面部重建，得到所述待换脸图像的第一面部姿态信息和第一面部关键点，并得到所述指定图像的第二面部姿态信息和第二面部关键点；所述第一面部姿态信息和所述第二面姿态信息均为三维的面部姿态信息，所述第一面部关键点和所述第二面部关键点均为三维的面部关键点；

根据所述第一面部姿态信息和所述第二面部姿态信息，以所述第二面部关键点作为变形控制点，将所述指定图像变形为面部姿态信息与所述第一面部姿态信息相同的图像，作为第二指定图像，并将对所述指定图像进行变形后形成的三维的面部关键点作为所述第二指定图像的第三面部关键点；

分别以所述第一面部关键点和所述第三面部关键点作为变形控制点，对所述待换脸图像和所述第二指定图像进行预定的面部变形处理，得到三维的面部关键点匹配的两个图像；所述两个图像包括：面部变形处理后的第二指定图像和面部变形处理后的待换脸图像；

以所述面部变形处理后的第二指定图像的面部纹理，更新所述面部变形处理后的待换脸图像的面部纹理，得到换脸图像。

可选地，所述根据所述第一面部姿态信息和所述第二面部姿态信息，以所述第二面部关键点作为变形控制点，将所述指定图像变形为面部姿态信息与所述第一面部姿态信息相同的图像，包括：

根据所述第一面部姿态信息和所述第二面部姿态信息，计算将所述指定图像变形为三维面部姿态信息与所述第一面部姿态信息相同的图像所需的第一变形坐标；

利用预设的第一图像变形方法，将所述第二面部关键点拖拽至所述第一变形坐标所指示的位置，得到面部姿态信息与所述第一面部姿态信息相同的图像。

可选地，所述分别以所述第一面部关键点和所述第三面部关键点作为变形控制点，对所述待换脸图像和所述第二指定图像进行预定的面部变形处理，得到三维的面部关键点匹配的两个图像，包括：