[发明专利]一种图像生成模型的训练方法、图像生成方法及装置

说明书

本公开关于一种图像生成模型的训练方法、图像生成方法及装置，涉及计算机技术领域。该方法包括：确定至少一个手势的空间信息以及手部特征；将该至少一个手势中每个手势的空间信息以及该每个手势对应的手部特征输入第一图像生成模型，得到与该至少一个手势对应的目标图像；基于该每个手势对应的手部特征、与该至少一个手势对应的目标图像以及与该至少一个手势对应的样本图像，对该第一图像生成模型训练，生成第二图像生成模型。本公开中，电子设备能够生成真实性更高的第二图像生成模型，并且基于该第二图像生成模型生成的图像的真实性较高，更贴近于真实图像，能够提升图像生成的有效性，提高图像的真实性。

技术领域

本公开涉及计算机技术领域，尤其涉及一种图像生成模型的训练方法、图像生成方法及装置。

背景技术

目前，电子设备可以通过计算机图形学渲染出不同动作下的手势图像，并且可以通过纹理贴图等方式增加该手势图像的真实感。

但是，上述方法中生成的手势图像的虚假感比较强，很难贴近真实图像，可能会降低图像生成的有效性。

发明内容

本公开提供一种图像生成模型的训练方法、图像生成方法及装置，解决了相关技术中生成的手势图像的虚假感比较强，很难贴近真实图像，可能会降低图像生成的有效性的技术问题。

本公开实施例的技术方案如下：

根据本公开实施例的第一方面，提供一种图像生成模型的训练方法。该方法可以包括：确定至少一个手势的空间信息以及手部特征，其中，一个手势的空间信息用于表征该手势中包括的至少两个关键点之间的位置关系，该手部特征用于表征手部的属性信息；将该至少一个手势中每个手势的空间信息以及该每个手势对应的手部特征输入第一图像生成模型，得到与该至少一个手势对应的目标图像；基于该每个手势对应的手部特征、与该至少一个手势对应的目标图像以及与该至少一个手势对应的样本图像，对该第一图像生成模型训练，生成第二图像生成模型。

可选地，该图像生成模型的训练方法还包括：获取样本数据，该样本数据包括至少一个样本图像以及该至少一个样本图像中每一个样本图像中包括的手势的描述信息，其中，一个样本图像中包括的手势的描述信息用于表征该样本图像中包括的手势的含义，该至少一个样本图像为与该至少一个手势对应的样本图像；当该样本数据中存在第一手势的描述信息时，对第一样本图像进行编码处理，得到该第一手势对应的手部特征，该第一手势为该至少一个手势中的一个，该第一样本图像为与该第一手势对应的样本图像。

可选地，该图像生成模型的训练方法还包括：当该样本数据中不存在该第一手势的描述信息时，将预设手部特征确定为该第一手势对应的手部特征。

可选地，上述确定至少一个手势的空间信息具体包括：基于第一手势的描述信息对该第一手势进行渲染处理，得到该第一手势的空间信息，该第一手势的空间信息包括该第一手势中包括的至少两个关键点中每个关键点的三维坐标以及该每个关键点的旋转参数，该第一手势为该至少一个手势中的一个。

可选地，上述基于该每个手势对应的手部特征、与该至少一个手势对应的目标图像以及与该至少一个手势对应的样本图像，对该第一图像生成模型训练，生成第二图像生成模型，包括：确定第一损失，该第一损失用于表征该每个手势对应的手部特征的概率分布与预设正态分布之间的不一致程度；将至少一个目标图像中的每一个目标图像输入初始判别器，得到第一概率，该第一概率用于表征该每一个目标图像被判别为第一标签的概率，该第一标签用于表征样本图像，该至少一个目标图像为与该至少一个手势对应的目标图像；确定第二损失，该第二损失用于表征至少一个样本图像中每一个样本图像的像素与该至少一个目标图像的像素之间的不一致程度，该至少一个样本图像为与该至少一个手势对应的样本图像；基于该第一损失、该第一概率以及该第二损失，确定第三损失；基于该第三损失，更新该第一图像生成模型中的参数，生成该第二图像生成模型。