[发明专利]人脸图像重演方法、装置、计算机设备及存储介质

说明书

本申请公开人脸图像重演方法、装置、计算机设备及存储介质，该方法包括：采集目标用户人脸图像的第一参数集和第二参数集；根据所述第一参数集和第二参数集对所述人脸图像进行三维建模，生成第一模拟图像和第二模拟图像；将所述第一模拟图像和第二模拟图像输入至预设的运动预估模型中；读取所述运动预估模型输出的运动向量，并将预设的源图像和所述运动向量输入至预设的人脸重演模型中；读取所述人脸重演模型输出的所述人脸图像的重演图像。通过该方法，实现了基于两张人脸图像的参数集，生成真实人脸图像的重演，提高了重演图像的真实性，使重演技术的适用性更加广泛。

技术领域

本申请实施例涉及图像处理领域，尤其是一种人脸图像重演方法、装置、计算机设备及存储介质。

背景技术

人脸重演技术，是基于一张给定的2D人脸驱动图像的表情和姿态，对另一张人脸源图片进行驱动生成的图片。生成的人脸图片将保留人脸源图片的身份信息，同时包含人脸驱动图像的表情和姿态。目前在可视化通信、虚拟会议、游戏娱乐、教学辅助、直播和短视频等具有广泛的应用。

现有技术中的人脸推演技术，通常采用提取人脸图形的关键点特征信息，然后，根据关键点特征信息进行三维图像建模，建模完成后根据建模模型实现对人脸图像的模拟重演。本申请创造的发明人在研究中发现：现有技术中人脸推演技术只能实现人脸图像的模拟重演，无法通过现实人脸图像实现现实状态的人脸图像重演。

发明内容

本申请实施例提供一种能够实现现实状态人脸图像重演的人脸图像重演方法、装置、计算机设备及存储介质。

为解决上述技术问题，本申请创造的实施例采用的一个技术方案是：提供一种人脸图像重演方法，包括：

采集目标用户人脸图像的第一参数集和第二参数集；

根据所述第一参数集和第二参数集对所述人脸图像进行三维建模，生成第一模拟图像和第二模拟图像；

将所述第一模拟图像和第二模拟图像输入至预设的运动预估模型中，其中，所述运动预估模型用于根据同一人脸的不同图像计算人脸运动向量的神经网络模型；

读取所述运动预估模型输出的运动向量，并将预设的源图像和所述运动向量输入至预设的人脸重演模型中，其中，所述人脸重演模型用于根据人脸图像和运动向量生成重演图像的神经网络模型；

读取所述人脸重演模型输出的所述人脸图像的重演图像。

可选地，所述采集目标用户人脸图像的第一参数集和第二参数集包括：

采集所述人脸图像的源图像和驱动图像，其中，所述源图像和驱动图像中的人脸图像存在姿态差异；

通过所述源图像采集所述第一参数集，并通过所述驱动图像采集所述第二参数集。

可选地，所述第一参数集包括：第一身份系数、第一表情系数和第一姿态系数，所述第二参数集包括：第一身份系数、第二表情系数和第二姿态系数，所述根据所述第一参数集和第二参数集对所述人脸图像进行三维建模，生成第一模拟图像和第二模拟图像：

将所述第一身份系数、第一表情系数和第一姿态系数输入至预设的三维建模模型中，生成所述第一模拟图像；

将所述第一身份系数、第二表情系数和第二姿态系数输入至所述三维建模模型中，生成所述第二模拟图像。

可选地，所述运动预估模型包括第一卷积通道和第一反卷积通道，所述将所述第一模拟图像和第二模拟图像输入至预设的运动预估模型中包括：

将所述第一模拟图像和第二模拟图像进行图像叠加后生成第一叠加图像，并将所述第一叠加图像输入至所述运动预估模型中；

所述运动预估模型通过第一卷积通道对所述第一叠加图像进行卷积池化处理，生成第一下采样特征；