[发明专利]一种通用的快速换脸方法、装置、电子设备和存储介质

权利要求书

1.一种通用的快速换脸方法，其特征在于，所述方法包括：

获取第一人脸图像对应的第一人脸渲染图，以及获取第二人脸图像的预处理图像，所述第一人脸渲染图为基于所述第一人脸图像生成的具有所述第二人脸图像的预设属性特征信息的人脸渲染图；

将所述第一人脸渲染图输入至第一编码器，输出第一编码，所述第一编码器用于提取所述第一人脸渲染图的身份特征；

将所述第二人脸图像的预处理图像输入至第二编码器，输出第二编码，所述第二编码器用于提取所述第二人脸图像的预处理图像的背景特征；所述背景特征包括以下至少一项：所述第二人脸图像的预处理图像的人物背景特征、所述第二人脸图像的预处理图像的发型特征和所述第二人脸图像的预处理图像的身体特征；

通过自适应网络，将所述第一编码器提取的所述身份特征转换为所述第二编码器提取的所述背景特征的偏移量和尺度变化因子；

根据所述偏移量和所述尺度变化因子，通过所述第二编码器进行特征融合处理，生成混合特征，所述混合特征为具有所述第一人脸渲染图的所述身份特征和所述预处理图像的所述背景特征；

生成器根据所述混合特征生成换脸图像，所述换脸图像为基于所述第一人脸渲染图生成的具有所述预处理图像的所述背景特征的图像。

2.根据权利要求1所述的方法，其特征在于，所述获取第二人脸图像的预处理图像包括：

识别所述第二人脸图像的人脸部分；

将所述人脸部分替换为白色图像，得到所述预处理图像。

3.根据权利要求1所述的方法，其特征在于，所述获取第一人脸图像对应的第一人脸渲染图包括：

获取所述第一人脸图像的第三编码和第二人脸图像的第四编码，所述第三编码具有所述第一人脸图像的所述身份特征，所述第四编码具有所述第二人脸图像的预设属性特征；

基于所述第三编码获取第一控制参数，以及基于所述第四编码获取第二控制参数；

根据所述第一控制参数和所述第二控制参数生成第三控制参数；

根据第三控制参数，对所述第一人脸图像进行渲染，生成第一人脸图像渲染图。

4.根据权利要求3所述的方法，其特征在于，

所述预设属性特征包括以下至少一项：

所述第二人脸图像的姿态属性特征、所述第二人脸图像的皮肤属性特征、所述第二人脸图像的表情属性特征和所述第二人脸图像的场景光线属性特征。

5.根据权利要求1所述的方法，其特征在于，

所述第一人脸图像和所述第二人脸图像均为真实人脸的图像。

6.根据权利要求1所述的方法，其特征在于，

所述第一编码器和所述第二编码器均采用卷积网络ResNet-50。

7.一种通用的快速换脸装置，其特征在于，编码器包括第一编码器和第二编码器，所述第一编码器用于提取第一人脸渲染图的身份特征，所述第二编码器用于提取第二人脸图像的预处理图像的背景特征，所述装置包括：

获取模块，用于获取第一人脸图像对应的第一人脸渲染图，以及获取第二人脸图像的预处理图像，所述第一人脸渲染图为基于所述第一人脸图像生成的具有所述第二人脸图像的预设属性特征信息的人脸渲染图；

所述编码器，用于将所述第一人脸渲染图输入至所述第一编码器，输出第一编码；以及将所述第二人脸图像的预处理图像输入至所述第二编码器，输出第二编码；

自适应网络，用于将所述第一编码器提取的所述身份特征转换为所述第二编码器提取的所述背景特征的偏移量和尺度变化因子；所述背景特征包括以下至少一项：所述第二人脸图像的预处理图像的人物背景特征、所述第二人脸图像的预处理图像的发型特征和所述第二人脸图像的预处理图像的身体特征；

融合器，用于根据所述自适应网络生成所述偏移量和所述尺度变化因子，通过所述第二编码器进行特征融合处理，生成混合特征，所述混合特征为具有所述第一人脸渲染图的所述身份特征和所述预处理图像的所述背景特征；

生成器，用于根据所述融合器生成的所述混合特征生成换脸图像，所述换脸图像为基于所述第一人脸渲染图生成的具有所述预处理图像的所述背景特征的图像。