[发明专利]视频生成方法、装置、计算机设备及存储介质

权利要求书

1.一种视频生成方法，其特征在于，所述方法包括：

获取第一视频，所述第一视频中包括第一对象；

将所述第一视频输入第一模型，对于每帧第一图像，获取所述第一图像的上下文图像和所述第一图像的聚合特征，所述聚合特征用于指示所述第一对象的姿态变化；其中，所述第一图像的上下文图像是指所述第一图像之前的多帧图像和之后的多帧图像中至少一帧；

根据所述聚合特征，确定所述第一图像中所述第一对象的关键点位置，得到所述第一图像的对象姿态信息；

将所述第一视频中至少一帧第一图像的对象姿态信息输入第二模型；

对于每一帧图像，基于多帧所述第一图像和所述第一图像的上下文图像的对象姿态信息的聚合特征，生成所述第一图像对应的第二图像，所述第二图像包括与所述第一图像中第一对象具备相同姿态的第二对象；或，对于每帧第一图像，生成所述第一图像和所述第一图像的上下文图像对应的第三图像，基于多帧所述第三图像的聚合特征生成所述第一图像对应的第二图像；

基于所述至少一帧第一图像对应的至少一帧第二图像，输出第二视频，所述第二视频中包括与所述第一对象具有相同姿态变化的第二对象。

2.根据权利要求1所述的方法，其特征在于，所述对于每帧第一图像，获取所述第一图像的上下文图像和所述第一图像的聚合特征包括：

对于每帧第一图像，根据所述第一图像和所述第一图像的上下文图像的图像特征，确定所述第一图像的上下文图像和所述第一图像中每两帧图像之间的相似度；

根据所述第一图像以及所确定的相似度，确定所述聚合特征。

3.根据权利要求2所述的方法，其特征在于，所述根据所述第一图像和所述第一图像的上下文图像的图像特征，确定所述第一图像的上下文图像和所述第一图像中每两帧图像之间的相似度包括：

对于所述第一图像的上下文图像和所述第一图像中每帧图像，根据所述每帧图像包括的多个像素点的像素特征，分别确定每两帧图像中像素点之间的相似度。

4.根据权利要求2所述的方法，其特征在于，所述根据所述第一图像以及所确定的相似度，确定所述聚合特征包括：

对于所述第一图像的上下文图像和所述第一图像中每帧图像，根据所述每帧图像与所述每帧图像以外的图像之间的相似度，确定所述每帧图像以外的图像相对于所述每帧图像的权重；

根据所述第一图像的上下文图像和所述第一图像的图像特征以及所述每帧图像以外的图像的权重，确定所述每帧图像的聚合特征。

5.根据权利要求4所述的方法，其特征在于，所述根据所述第一图像的上下文图像和所述第一图像的图像特征以及所述每帧图像以外的图像的权重，确定所述每帧图像的聚合特征包括：

根据所述每帧图像与所述每帧图像以外的图像之间的相似度，确定所述每帧图像的权重；

确定所述每帧图像以外的图像的特征向量与所述每帧图像以外的图像的权重的第一乘积，以及所述每帧图像的特征向量与所述每帧图像的权重的第二乘积；

将所述第一乘积和所述第二乘积之和，确定为所述每帧图像的聚合特征。

6.根据权利要求1所述的方法，其特征在于，所述对于每帧第一图像，获取所述第一图像的上下文图像和所述第一图像的聚合特征包括：

对于所述每帧第一图像，根据所述第一图像和所述第一图像的上下文图像的图像特征，确定所述第一图像的上下文图像和所述第一图像中每帧图像的关键点位置；

根据所述第一图像的上下文图像和所述第一图像中每帧图像的关键点位置，获取所述第一图像的上下文图像和所述第一图像的关键点位置的聚合特征。