[发明专利]3D顶点驱动的人脸姿态编辑方法、系统及电子设备

权利要求书

1.3D顶点驱动的人脸姿态编辑方法，其特征在于：包括：

获取包含人脸信息的基础图片；

对所述基础图片进行信息编码，生成信息数据；

获取信息数据，对所述信息数据进行处理，生成目标轮廓图；

对所述目标轮廓图进行细节补充，生成目标图。

2.根据权利要求1所述的3D顶点驱动的人脸姿态编辑方法，其特征在于：所述对所述基础图片进行信息编码，生成信息数据包括：

利用3DMM模型对所述基础图片进行三维人脸模型重建，生成三维人脸形状顶点坐标数据信息。

3.根据权利要求2所述的3D顶点驱动的人脸姿态编辑方法，其特征在于：所述三维人脸形状顶点坐标数据信息包括形状向量、纹理向量；

所述形状向量S＝(X1，Y1，Z1；X2，Y2，Z2；...；Xn，Yn，Zn)；

所述纹理向量T＝(R1，G1，B1；R2，G2，B2；…；Rn，Gn，Bn)。

4.根据权利要求3所述的3D顶点驱动的人脸姿态编辑方法，其特征在于：所述对所述信息数据进行处理，生成目标轮廓图包括：

于灰度图上绘制所述形状向量，生成深度图；

将所述基础图片与所述深度图拼接，输入编码器，生成特征图；

将目标姿态的深度图降采样至与所述特征图尺寸相同；

将所述特征图与降采样后的所述目标姿态的深度图拼接，输入第一生成器，生成目标轮廓图。

5.根据权利要求4所述的3D顶点驱动的人脸姿态编辑方法，其特征在于：在灰度图上绘制所述形状向量过程中，所述形状向量V的x,y坐标分别表示在图像上列和行的位置，将V的z坐标用于表示对应像素点的亮度值。

6.根据权利要求1-5中任一项所述的3D顶点驱动的人脸姿态编辑方法，其特征在于：所述基础图片与所述深度图拼接包括：

所述基础图片与所述深度图进行通道维度的拼接，获得尺寸为[3+1,h,w]的4通道图像。

7.根据权利要求6所述的3D顶点驱动的人脸姿态编辑方法，其特征在于：所述对所述目标轮廓图进行细节补充，生成目标图包括：

将所述特征图与降采样后的所述目标姿态的深度图拼接，输入第一生成器，获得所述基础图片的姿态转换到目标图姿态的变形场；

将所述特征图输入第二生成器，获取所述基础图片的细节信息数据；

使用所述变形场对细节信息数据进行变形，生成具备目标姿态的细节图；

所述目标姿态细节图与所述目标轮廓图相加，生成目标图。

8.根据权利要求7所述的3D顶点驱动的人脸姿态编辑方法，其特征在于：所述变形场尺寸为[2,h,w]，每个位置(x,y)的2个通道数值分别为(x’,y’)，表示对应位置重采样点在原图上的X，Y轴坐标。

9.3D顶点驱动的人脸姿态编辑系统，其特征在于：所述系统包括：

信息采集单元，所述信息采集单元用于获取包含人脸信息的基础图片；

信息编码单元，所述信息编码单元用于对所述基础图片进行信息编码，生成信息数据；

姿态编辑单元，所述姿态编辑单元用于对所述信息数据进行处理，生成目标轮廓图；

细节补充单元，所述细节补充单元用于对所述目标轮廓图进行细节补充，生成目标图。

10.一种电子设备，其特征在于，所述电子设备包括：

至少一个处理器；以及，

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行前述权利要求1-9中任一项所述的3D顶点驱动的人脸姿态编辑方法。