[发明专利]用于面部图像生成的数据处理方法、设备和介质

权利要求书

1.一种用于面部图像生成的数据处理方法，包括：

获取第一面部图像及第二面部图像；

获取第一面部图像(I_MA)中与面部特征对应的M个第一图像块，并获取第二面部图像(I_FA)中与面部特征对应的N个第二图像块；

将M个第一图像块和N个第二图像块变换到特征空间以生成M个第一特征块和N个第二特征块；

根据特定的控制向量选择一部分第一特征块和一部分第二特征块；

至少基于所选择的一部分第一特征块和一部分第二特征块，生成第一合成特征图；以及

将所述第一合成特征图反变换回图像空间以生成第三面部图像(I_O1)，

其中M和N为自然数，

其中通过将M个第一图像块和N个第二图像块输入到继承网络来生成所述第三面部图像，并且

所述继承网络通过以下训练步骤得到：

获取第五面部图像(I_M)中与各面部特征对应的L个第五图像块，并获取第六面部图像(I_F)中与各面部特征对应的L个第六图像块，其中L为自然数，且M≤L且N≤L；

根据第一控制向量选择一部分第五图像块和一部分第六图像块以生成第一合成图像并根据第二控制向量选择另一部分第五图像块和另一部分第六图像块以生成第二合成图像

获取第一合成图像中与各面部特征对应的L个第七图像块，并获取第二合成图像中与各面部特征对应的L个第八图像块；

将L个第七图像块和L个第八图像块输入到继承网络；

通过所述继承网络，输出基于第一控制向量选择的一部分第七图像块和一部分第八图像块而生成的第七面部图像(I'_M)，并输出基于第二控制向量选择的另一部分第七图像块和另一部分第八图像块而生成的第八面部图像(I'_F)，其中第五面部图像是用于对第七面部图像提供监督信息的监督图像，第六面部图像是用于对第八面部图像提供监督信息的监督图像，并且将第五至第八面部图像作为一组继承训练数据；

将至少一组继承训练数据输入至第一判别网络，其中所述第一判别网络被设置为当向所述第一判别网络输入一图像时，输出该图像为真实图像的概率值；以及

基于第一损失函数，交替地训练所述继承网络和所述第一判别网络，直至所述第一损失函数收敛为止，

其中，在所述继承网络的训练过程中，不需要建立存在父、母和孩子关系的人脸数据库。

2.根据权利要求1所述的方法，其中所述特定的控制向量包括与各面部特征对应的L个信息位，其中L为自然数，且M≤L，N≤L，并且

根据特定的控制向量选择一部分第一特征块和一部分第二特征块的步骤进一步包括：

当所述特定的控制向量中的一个信息位为第一值时，从M个第一特征块中选择与该位对应的面部特征的特征块，而当所述特定的控制向量中的该信息位为第二值时，从N个第二特征块中选择与该位对应的面部特征的特征块。

3.根据权利要求1所述的方法，其中至少基于所选择的一部分第一特征块和一部分第二特征块，生成第一合成特征图的步骤进一步包括：

将指定属性信息扩展为处于所述特征空间中的属性特征块；以及

基于所选择的一部分第一特征块、一部分第二特征块以及属性特征块，生成第一合成特征图。

4.根据权利要求1所述的方法，其中所述第一损失函数基于所述第一判别网络对于至少一组继承训练数据输出的概率值以及至少一组继承训练数据中面部图像与对应的监督图像之间的像素差异而确定。

5.根据权利要求4所述的方法，其中所述第一损失函数进一步基于以下至少之一而确定：

至少一组继承训练数据中面部图像的属性与对应的监督图像的属性之间的差异和至少一组继承训练数据中面部图像的特征与对应的监督图像的特征之间的差异。