[发明专利]人脸换脸方法、装置、设备及计算机存储介质

说明书

本发明公开了一种人脸换脸方法、装置、设备及计算机存储介质，该方法包括：获得第一人脸图像和第二人脸图像；识别第二人脸图像中的关键点，提取关键点圈定的区域的框图，得到第一表情姿态图；提取第二人脸图像中的光照信息，得到第一光照条件图；将第一表情姿态图、第一光照条件图和第一人脸图像输入生成式对抗网络GAN模型，得到将第一表情姿态图、第一光照条件图与第一人脸图像融合后的换脸图像。根据本发明实施例，能够通过剥离目标人脸上的表情以及光照信息来进行换脸操作，提高人脸换脸的自然程度。

技术领域

本发明属于图像处理技术领域，尤其涉及一种人脸换脸方法、装置、设备及计算机存储介质。

背景技术

随着网络的发展，大众娱乐性质的社交软件不断增多，在许多具有直播、视频拍摄以及图像编辑等功能的社交软件中，人脸交换逐渐成为大众娱乐的新热点，具备了越来越广泛的应用场景。人脸交换或者说换脸技术，指的是在图像或者视频中将一个人的脸换成另一个人的脸。

但是，目前的换脸技术中，将人脸进行交换后得到的图像或者视频中，存在人脸的表情和光影不自然的情况，影响了人脸换脸的效果。并且，由于目前的换脸技术中，想要对人脸的表情和光照进行调整，需要分别设置不同的网络模型，使得最终得到的换脸结果与原始图像之间的失真较大，换脸效果不自然。

发明内容

本发明实施例提供一种人脸换脸方法、装置、设备及计算机存储介质，能够通过剥离目标人脸上的表情以及光照信息来进行换脸操作，提高人脸换脸的自然程度。

一方面，本发明实施例提供一种人脸换脸方法，方法包括：

获得第一人脸图像和第二人脸图像；

识别第二人脸图像中的关键点，提取关键点圈定的区域的框图，得到第一表情姿态图；

提取第二人脸图像中的光照信息，得到第一光照条件图；

将第一表情姿态图、第一光照条件图和第一人脸图像输入生成式对抗网络GAN模型，得到将第一表情姿态图、第一光照条件图与第一人脸图像融合后的换脸图像。

另一方面，本发明实施例提供了一种人脸换脸装置，装置包括：

图像获得模块，用于获得第一人脸图像和第二人脸图像；

表情提取模块，用于识别第二人脸图像中的关键点，提取关键点圈定的区域的框图，得到第一表情姿态图；

光照提取模块，用于提取第二人脸图像中的光照信息，得到第一光照条件图；

融合模块，用于将第一表情姿态图、第一光照条件图和第一人脸图像输入生成式对抗网络GAN模型，得到将第一表情姿态图、第一光照条件图与第一人脸图像融合后的换脸图像。

再一方面，本发明实施例提供了一种人脸换脸设备，设备包括：

处理器以及存储有计算机程序指令的存储器；

处理器执行计算机程序指令时实现如以上任意一项的在人脸换脸方法。

再一方面，本发明实施例提供了一种计算机存储介质，计算机存储介质上存储有计算机程序指令，计算机程序指令被处理器执行时实现如以上任意一项的人脸换脸方法。