[发明专利]生成动画的方法和装置

权利要求书

1.一种生成动画的方法，包括：

获取预先提取的源图像和所述源图像的特征；

将目标图像输入第一关键点提取网络，输出所述目标图像的关键点；

将所述目标图像的关键点输入第一特征提取网络，输出所述目标图像的特征；

将所述源图像的特征和所述目标图像的特征输入位姿生成网络，输出位姿变换特征图，其中，位姿生成网络实现所述源图像的语义特征和所述目标图像的形状特征的融合，得到融合的位姿变换特征图，位姿变换特征图中包含了目标图位姿的坐标空间变换信息；

将所述位姿变换特征图和所述源图像输入驱动网络，输出所述动画；

其中，所述源图像的特征通过如下方法得到：

将源图像输入第二关键点提取网络提取所述源图像的关键点；

将所述源图像的关键点和所述源图像输入第二特征提取网络，得到所述源图像的特征。

2.根据权利要求1所述的方法，其中，所述方法还包括：

在将目标图像输入第一关键点提取网络之前，将所述源图像的特征输入高清图像生成网络，输出清晰度大于预定值的源图像。

3.根据权利要求2所述的方法，其中，所述高清图像生成网络为3D纹理生成模型。

4.根据权利要求1-3中任一项所述的方法，其中，所述方法还包括：

将所述源图像和所述源图像的特征存储在本地。

5.一种生成动画的装置，包括：

获取单元，被配置成获取预先提取的源图像和所述源图像的特征；

第一提取单元，被配置成将目标图像输入第一关键点提取网络，输出所述目标图像的关键点；

第二提取单元，被配置成将所述目标图像的关键点输入第一特征提取网络，输出所述目标图像的特征；

第三提取单元，被配置成将所述源图像的特征和所述目标图像的特征输入位姿生成网络，输出位姿变换特征图，其中，位姿生成网络实现所述源图像的语义特征和所述目标图像的形状特征的融合，得到融合的位姿变换特征图，位姿变换特征图中包含了目标图位姿的坐标空间变换信息；

驱动单元，被配置成将所述位姿变换特征图和所述源图像输入驱动网络，输出所述动画；

第四提取单元，被配置成将源图像输入第二关键点提取网络提取所述源图像的关键点；将所述源图像的关键点和所述源图像输入第二特征提取网络，得到所述源图像的特征。

6.根据权利要求5所述的装置，其中，所述装置还包括生成单元，被配置成：

在将目标图像输入第一关键点提取网络之前，将所述源图像的特征输入高清图像生成网络，输出清晰度大于预定值的源图像。

7.根据权利要求6所述的装置，其中，所述高清图像生成网络为3D纹理生成模型。

8.根据权利要求5-7中任一项所述的装置，其中，所述装置还包括存储单元，被配置成：

将所述源图像和所述源图像的特征存储在本地。

9. 一种电子设备，包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-4中任一项所述的方法。

10.一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据权利要求1-4中任一项所述的方法。