[发明专利]视频风格转换处理方法和装置

权利要求书

1.一种视频风格转换处理方法，其特征在于，包括以下步骤：

获取用于模型训练的样本图片以及对应的样本视频集合；

获取所述样本图片的风格属性信息，进而在训练目标模型的过程中，根据所述风格属性信息设置目标模型中反映风格属性特征网络层的第一目标输出向量；

获取所述样本视频中每个视频帧的内容信息和光流场信息，进而在训练所述目标模型的过程中，根据当前输入视频帧的内容信息设置所述目标模型中反映内容特征网络层的第二目标输出向量，以及根据当前输入视频帧的光流场信息设置所述目标模型中反映光流场特征网络层的第三目标输出向量；

根据所述第一目标输出向量、所述第二目标输出向量，以及所述第三目标输出向量训练所述目标模型中每个网络层的网络参数，并根据满足预设训练条件时对应的目标网络参数和所述目标模型，生成与所述样本图片对应的视频风格转换模型，以根据所述视频风格转换模型对目标视频进行转换处理生成与所述样本图片匹配的视频风格。

2.如权利要求1所述的方法，其特征在于，在所述获取用于模型训练的样本图片以及对应的样本视频集合之后，还包括：

根据所述目标模型的输入图片尺寸，对所述样本图片和/或所述样本视频集合中的每个视频帧的尺寸大小进行调整，使调整后的所述样本图片和/或所述样本视频集合中的每个视频帧的尺寸大小与所述输入图片尺寸相匹配。

3.如权利要求2所述的方法，其特征在于，所述对所述样本图片和/或所述样本视频集合中的每个视频帧的尺寸大小进行调整，包括：

对所述样本图片和/或所述样本视频集合中的每个视频帧的尺寸大小进行剪裁处理，或者，

对所述样本图片和/或所述样本视频集合中的每个视频帧的尺寸大小进行插值处理。

4.如权利要求1所述的方法，其特征在于，在所述生成与所述样本图片对应的视频风格转换模型之后，还包括：

根据预设算法对所述目标网络参数进行计算，将计算结果满足预设过滤条件的候选网络参数对应的网络层进行删除处理。

5.如权利要求1所述的方法，其特征在于，在所述根据所述视频风格转换模型对目标视频进行转换处理生成与所述样本图片匹配的视频风格之前，还包括：

对所述视频风格转换模型中的网络层进行内存复用设置，以使在根据所述视频风格转换模型对目标视频进行转换处理的过程中，删除内存中存储的所述网络层的处理数据。

6.一种视频风格转换处理方法，其特征在于，包括以下步骤：

获取包含目标视频和目标图片的视频风格转换请求；

获取预先训练的与所述目标图片对应的目标视频风格转换模型；其中，获取用于模型训练的目标图片以及对应的样本视频集合；获取所述目标图片的风格属性信息，进而在训练目标模型的过程中，根据所述风格属性信息设置目标模型中反映风格属性特征网络层的第一目标输出向量；获取所述样本视频中每个视频帧的内容信息和光流场信息，进而在训练所述目标模型的过程中，根据当前输入视频帧的内容信息设置所述目标模型中反映内容特征网络层的第二目标输出向量，以及根据当前输入视频帧的光流场信息设置所述目标模型中反映光流场特征网络层的第三目标输出向量；根据所述第一目标输出向量、所述第二目标输出向量，以及所述第三目标输出向量训练所述目标模型中每个网络层的网络参数，并根据满足预设训练条件时对应的目标网络参数和所述目标模型，生成与所述目标图片对应的视频风格转换模型；

根据所述目标视频风格转换模型对所述目标视频进行转换处理生成与所述目标图片匹配的视频风格。