[发明专利]图像处理方法及装置

权利要求书

1.一种图像处理方法，其特征在于，所述方法包括：

分别对包含第一人体的第一图像和包含第二人体的第二图像进行三维重建，得到所述第一人体的三维参数及所述第二人体的三维参数；

基于所述第一图像，对所述第一人体的三维网格模型进行纹理映射，得到纹理映射结果；

从所述纹理映射结果中，提取所述第一图像中可见部分的第一人体的纹理信息；

基于所述第一人体的三维参数、所述第二人体的三维参数及所述可见部分的第一人体的纹理信息，进行图像渲染，得到包含第三人体的第三图像，所述第三人体的形态与所述第一人体的形态相同，所述第三人体的姿态与所述第二人体的姿态相同；

获取对应所述第一图像的前景图像及背景图像；

通过生成对抗网络模型中生成器包括的自编码网络，对所述前景图像进行特征提取，得到所述自编码网络每一层输出的所述前景图像的特征；

将所述第三图像，输入所述生成对抗网络中生成器包括的融合网络的输入层，并将所述自编码网络每一层输出的所述前景图像的特征分别输入所述融合网络的各个层，输出第四图像；

将所述第四图像与所述背景图像进行图像融合，以对第四图像的背景进行填充，得到包含所述第三人体的目标图像。

2.如权利要求1所述的方法，其特征在于，所述分别对包含第一人体的第一图像和包含第二人体的第二图像进行三维重建，得到所述第一人体的三维参数及所述第二人体的三维参数，包括：

基于包含第一人体的第一图像和包含第二人体的第二图像，得到相机参数；

基于相机参数，分别对包含第一人体的第一图像和包含第二人体的第二图像进行三维重建，得到所述第一人体的三维网格模型及所述第二人体的三维网格模型；

根据所述第一人体的三维网格模型得到所述第一人体的三维参数，以及根据所述第二人体的三维网格模型得到所述第二人体的三维参数。

3.如权利要求2所述的方法，其特征在于，所述三维参数至少包含形态参数和姿态参数；

所述基于所述第一人体的三维参数、所述第二人体的三维参数及所述可见部分的第一人体的纹理信息，进行图像渲染，得到包含第三人体的第三图像，包括：

基于所述第一人体的形态参数、所述可见部分的第一人体的纹理信息、所述第二人体的姿态参数，进行图像渲染，得到所述包含第三人体的第三图像。

4.如权利要求1所述的方法，其特征在于，所述获取对应所述第一图像的前景图像及背景图像，包括：

基于所述第一人体的三维参数，进行图像渲染，得到所述第一图像的原始前景图像及原始背景图像；

通过生成对抗网络模型中的生成器，对所述原始前景图像进行图像重构，得到对应所述第一图像的前景图像；

通过所述生成器，对所述原始背景图像中被掩模部分的像素进行填充，得到对应所述第一图像的背景图像。

5.如权利要求4所述的方法，其特征在于，所述方法还包括：

将所述目标图像输入至所述生成对抗网络模型中的判别器，输出所述目标图像相对目标参考图像的准确度；

基于所述准确度，确定所述判别器的损失函数的值；

基于所述损失函数的值，更新所述生成对抗网络模型的模型参数。