[发明专利]使用多尺度图块对抗性损失的衣物变形

权利要求书

1.一种在数字媒体环境中由至少一个计算设备实现的方法，所述数字媒体环境用于生成穿戴目标服装的人物的合成图像，所述方法包括：

由所述至少一个计算设备接收描绘穿戴服装制品的人物的参考图像；

由所述至少一个计算设备接收目标服装的图像，所述人物将被描绘为穿戴所述目标服装；

由所述至少一个计算设备使用几何匹配模块来生成所述目标服装的变形图像，所述几何匹配模块使用多尺度图块对抗性损失而被训练，所述目标服装的所述变形图像基于从所述参考图像得出的人物表示而被生成；以及

由所述至少一个计算设备生成合成图像，所述合成图像描绘穿戴所述目标服装的所述变形图像而不是所述服装制品的所述人物。

2.根据权利要求1所述的方法，其中所述参考图像和所述目标服装的图像是二维图像。

3.根据权利要求1所述的方法，其中所述人物表示包括描述以下各项的信息：共同地表示穿戴所述服装制品的所述人物的姿势热图、身体形状和一个或多个保留区域。

4.根据权利要求3所述的方法，其中所述姿势热图是多通道特征图，其中每个通道对应于被表示为矩形的人类姿势关键点。

5.根据权利要求3所述的方法，其中所述身体形状是表示人类身体的二进制掩码的单通道特征图。

6.根据权利要求3所述的方法，其中所述一个或多个保留区域被限定为RGB(红-绿-蓝)图像，所述RGB(红-绿-蓝)图像包含穿戴所述服装制品的所述人物的头发区域或面部区域中的一项或多项以保持所述人物的身份。

7.根据权利要求1所述的方法，其中所述多尺度图块对抗性损失通过以下而被计算：

接收图像对，所述图像对包括描绘穿戴服装制品的人物的参考图像和描绘未被所述人物穿戴的所述服装制品的产品图像；

针对穿戴所述服装制品的所述人物，从所述参考图像得出服装不可知的人物表示；

通过将所述产品图像映射到所述服装不可知的人物表示来生成变形衣物；

通过从所述参考图像提取所述服装制品的掩码来生成针对所述服装制品的真值变形衣物；

从所述变形衣物和所述真值变形衣物中采样多个图块对，所述多个图块对中的每个图块对是从所述变形衣物和所述真值衣物中的相同对应位置被采样的；以及

比较所述多个图块对中的每个图块对，以确定来自所述变形衣物的图块和来自所述真值变形衣物的图块是否共享相同的局部纹理。

8.根据权利要求7所述的方法，其中所述多个图块对中的每个图块是从如下部分被采样的，所述部分落在所述图块从中被采样的相应的所述变形衣物或所述真值变形衣物的衣物区域内。

9.根据权利要求7所述的方法，其中所述几何匹配模块还使用最小绝对偏差损失而被训练，所述最小绝对偏差损失基于所述变形衣物和所述真值变形衣物而被计算。

10.根据权利要求7所述的方法，其中来自所述变形衣物和所述真值变形衣物的所述多个图块对包括：

第一尺寸的第一图块对；

第二尺寸的第二图块对，所述第二尺寸与所述第一尺寸不同；以及

第三尺寸的第三图块对，所述第三尺寸与所述第一尺寸和所述第二尺寸均不同。

11.根据权利要求1所述的方法，还包括：在生成所述合成图像之前，由所述至少一个计算设备将所述目标服装的所述变形图像与所述参考图像中的所述人物对准。