[发明专利]一种换脸方法、装置、设备及存储介质

权利要求书

1.一种换脸方法，其特征在于，所述方法包括：

将源图像输入预先训练得到的换脸模型中的多层次身份编码器，得到所述源图像对应的多个身份特征向量，其中，所述多层次身份编码器中包括多个卷积层，各所述身份特征向量分别由所述多层次身份编码器中的一个卷积层处理得到，所述源图像中包括源人脸；

将目标图像输入所述换脸模型中的多层次属性编码器，得到所述目标图像对应的多个属性特征图，其中，所述多层次属性编码器中包括多个卷积层，各所述属性特征图分别由所述多层次属性编码器中的一个或多个卷积层处理得到，所述目标图像中包括待转换的目标人脸；

将各所述身份特征向量以及各所述属性特征图输入所述换脸模型中的图像生成器，经所述图像生成器中的多个级联的特征调制模块依次融合后，得到换脸图像，所述换脸图像中包括所述源人脸，且所述源人脸具有所述目标人脸的属性特征；

所述经所述图像生成器中的多个级联的特征调制模块依次融合后，得到换脸图像，包括：

经所述图像生成器中的首个特征调制模块将初始身份特征向量、对应的身份特征向量以及属性特征图进行融合，并将融合后得到的身份特征图输入后一个特征调制模块，所述图像生成器中除所述首个特征调制模块外的各特征调制模块依次将前一特征调制模块融合后得到的身份特征图、对应的身份特性向量以及属性特征图进行融合，并将融合后得到的身份特征图输出至后一特征调制模块或作为换脸图像进行输出。

2.根据权利要求1所述的方法，其特征在于，所述图像生成器中的各所述特征调制模块分别包括属性调制模块以及特征融合模块，其中，所述属性调制模块包括属性关系模块、属性调制参数修订模块以及属性调制特征图生成模块；

所述将各所述身份特征向量以及各所述属性特征图输入所述换脸模型中的图像生成器，经所述图像生成器中的多个级联的特征调制模块依次融合后，得到换脸图像，包括：

将第一属性特征图以及第一输入特征图输入第一特征调制模块中的所述属性关系模块，得到属性关系特征图，所述属性关系模块用于获取已加入的属性特征与未加入的属性特征之间的关联性，所述第一属性特征图为与所述第一特征调制模块对应的属性特征图，所述第一输入特征图为所述第一特征调制模块的前一特征调制模块输出的特征图，所述第一特征调制模块为所述多个级联的特征调制模块中的任一特征调制模块；

将所述属性关系特征图以及与所述第一属性特征图关联的初始属性调制参数特征图输入所述属性调制参数修订模块，得到目标属性调制参数特征图；

将所述目标属性调制参数特征图以及所述第一输入特征图输入所述属性调制特征图生成模块，得到属性调制特征图；

将所述属性调制特征图以及目标身份调制特征图输入所述特征融合模块，得到所述第一特征调制模块输出的融合后特征图，所述融合后特征图用于输入所述第一特征调制模块之后的特征调制模块进行融合，其中，所述目标身份调制特征图基于对第一身份特征向量进行身份调制后得到，所述第一身份特征向量为与所述第一特征调制模块对应的身份特征向量。

3.根据权利要求2所述的方法，其特征在于，所述图像生成器中的各所述特征调制模块还分别包括身份调制模块，其中，所述身份调制模块包括身份关系模块、身份调制参数修订模块以及身份调制特征图生成模块；

所述将所述属性调制特征图以及目标身份调制特征图输入所述特征融合模块，得到所述第一特征调制模块输出的融合后特征图之前，还包括：

将所述第一身份特征向量以及所述第一输入特征图输入所述第一特征调制模块中的所述身份关系模块，得到身份关系特征图，所述身份关系模块用于获取已加入的身份特征与未加入的身份特征之间的关联性；

将所述身份关系特征图以及与所述第一身份特征向量关联的初始身份调制参数特征图输入所述身份调制参数修订模块，得到目标身份调制参数特征图；

将所述目标身份调制参数特征图以及所述第一输入特征图输入所述身份调制特征图生成模块，得到所述目标身份调制特征图。