[发明专利]用于人物图像处理的方法、系统和程序载体

权利要求书

1.一种用于人物图像处理的方法，所述方法包括以下步骤：

S1：获取原始人物图像；

S2：从原始人物图像提取第一特征信息和第二特征信息，所述第二特征信息不同于所述第一特征信息；以及

S3：基于所述第一特征信息和第二特征信息，在结合使用变分自编码器和生成对抗网络的情况下训练人物图像生成模型。

2.根据权利要求1所述的方法，其中，所述步骤S3包括：

S31：基于第一特征信息和第二特征信息，借助生成对抗网络的生成式网络生成复原人物图像，其中，使用变分自编码器与U-Net网络的组合作为所述生成式网络；

S32：将复原人物图像和原始人物图像输入到生成对抗网络的判别式网络中判别真伪；

S33：根据复原人物图像与原始人物图像之间的偏差调整人物图像生成模型的至少一个参数。

3.根据权利要求1或2所述的方法，其中，所述步骤S2包括：

借助变分自编码器网络和/或U-Net网络从原始人物图像提取人物姿态特征向量和人物外观特征向量。

4.根据权利要求1至3中任一项所述的方法，在执行步骤S2之前，所述方法还包括以下步骤：

从原始人物图像中分割出人物区域；

在所述人物区域中提取人物关键点信息；

对人物关键点信息进行拼接和可视化处理，以得到人物姿态图像。

5.根据权利要求2所述的方法，其中，所述步骤S33包括：

基于复原人物图像以及判别式网络的判别结果计算损失函数；以及

根据所述损失函数调整人物图像生成模型的至少一个参数。

6.根据权利要求5所述的方法，其中，对生成式网络使用的损失函数包括：

第一部分，所述第一部分通过以下等式表示：

其中，F为VGG19网络特征参数，X为输入的原始人物图像，为生成的复原人物图像，{l_c}为VGG19对应的特征层；

第二部分，所述第二部分通过以下等式表示：

其中，X为输入的原始人物图像，Y为输入的人物姿态图像，z为提取到的图像整体特征，和分别表示在所使用的特征提取网络的中间层得到的未经采样的特征向量；

第三部分，所述第三部分通过以下等式表示：

其中，F为VGG19网络特征参数，G为VGG19网络特征参数的格拉姆矩阵，X为输入的原始人物图像，为生成的复原人物图像，{l_S}为VGG19对应的特征层；

第四部分，所述第四部分通过以下等式表示：

其中，D为判别式网络的网络特征参数，X为输入的原始人物图像，为生成的复原人物图像，{l_D}为判别式网络对应的特征层。

7.根据权利要求5所述的方法，其中，对判别式网络使用的损失函数通过以下等式表示：

其中，X为输入的原始人物图像，为生成的复原人物图像，Y为输入的人物姿态图像，E_X，Y和分别表示期望，Dis(X，Y)和分别表示判别式网络的输出结果。

8.一种用于借助人物图像生成模型生成人物图像的方法，其中，所述人物图像生成模型为根据权利要求1至7中任一项所述的方法中所述的人物图像生成模型，所述方法包括以下步骤：

获取第一人物图像的特征信息；

获取第二人物图像的另一特征信息；以及

将所述特征信息和所述另一特征信息输入到人物图像生成模型中，以生成目标人物图像，其中，所述目标人物图像具有第一人物图像的特征信息并且具有第二人物图像的另一特征信息。