[发明专利]人脸换脸方法、装置、设备及计算机存储介质

说明书

本发明公开了一种人脸换脸方法、装置、设备及计算机存储介质。所述方法包括：获得第一人脸图像和第二人脸图像；识别第二人脸图像中的关键点，提取关键点圈定的区域的框图，得到第一表情姿态图；将第一表情姿态图与第一人脸图像输入生成式对抗网络GAN模型，得到将第一表情姿态图与第一人脸图像融合后的换脸图像。根据本发明实施例，能够通过剥离目标人脸上的表情来进行换脸操作，提高人脸换脸的自然程度。本发明还公开了一种基于上述方法的装置、设备及计算机存储介质。

技术领域

本发明属于图像处理技术领域，尤其涉及一种人脸换脸方法、装置、设备及计算机存储介质。

背景技术

随着网络的发展，大众娱乐性质的社交软件不断增多，在许多具有直播、视频拍摄以及图像编辑等功能的社交软件中，人脸交换逐渐成为大众娱乐的新热点，具备了越来越广泛的应用场景。人脸交换或者说换脸技术，指的是在图像或者视频中将一个人的脸换成另一个人的脸。

但是，目前的换脸技术中，将人脸进行交换后得到的图像或者视频中，存在人脸的表情不自然的情况，影响了人脸换脸的效果。

发明内容

本发明实施例提供一种人脸换脸方法、装置、设备及计算机存储介质，能够通过剥离目标人脸上的表情来进行换脸操作，提高人脸换脸的自然程度。

一方面，本发明实施例提供一种人脸换脸方法，方法包括：

获得第一人脸图像和第二人脸图像；

识别第二人脸图像中的关键点，提取关键点圈定的区域的框图，得到第一表情姿态图；

将第一表情姿态图与第一人脸图像输入生成式对抗网络GAN模型，得到将第一表情姿态图与第一人脸图像融合后的换脸图像。

另一方面，本发明实施例提供了一种人脸换脸装置，装置包括：

图像获得模块，用于获得第一人脸图像和第二人脸图像；

表情提取模块，用于识别第二人脸图像中的关键点，提取关键点圈定的区域的框图，得到第一表情姿态图；

表情融合模块，用于将第一表情姿态图与第一人脸图像输入生成式对抗网络GAN模型，得到将第一表情姿态图与第一人脸图像融合后的换脸图像。

再一方面，本发明实施例提供了一种人脸换脸设备，设备包括：

处理器以及存储有计算机程序指令的存储器；

处理器执行计算机程序指令时实现如以上任意一项的在人脸换脸方法。

再一方面，本发明实施例提供了一种计算机存储介质，计算机存储介质上存储有计算机程序指令，计算机程序指令被处理器执行时实现如以上任意一项的人脸换脸方法。

本发明实施例的人脸换脸方法、装置、设备及计算机存储介质，能够将被替换的第二人脸图像中的关键点圈定的区域的框图进行提取，得到第一表情姿态图，因此该第一表情姿态图内仅包含第二人脸图像中关键部位的表情信息；之后将第一表情姿态图和第一人脸图像输入训练好的GAN网络进行融合，即可得到将第一表情姿态图与第一人脸图像融合后的换脸图像。此时该换脸图像即为使用第一人脸图像替换第二人脸图像后的结果图。由于在本发明中，单独将第二人脸图像中的表情信息进行了提取，而表情信息除了能够反映人脸的表情之外，还可以反映人脸的姿态角度，因此之后直接将第一人脸图像按照所提取出来的第一表情姿态图进行调整，即可得到具有第二人脸图像表情和姿态的自然的换脸图像，尽可能提高了换脸后人物表情和姿态的自然程度，换脸效果更好。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例中所需要使用的附图作简单的介绍，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。