[发明专利]视频剪辑方法及其装置

权利要求书

1.一种视频剪辑方法，其特征在于，包括以下步骤：

采集源视频数据，所述源视频数据包括至少一个第一图像帧；

基于AR场景对第一图像帧进行渲染得到虚拟对象，所述第一图像帧和所述虚拟对象构成第一视频数据，其中，所述虚拟对象与所述第一图像帧中预设特征标记相匹配；

利用mediacodec技术对所述第一视频数据进行解码得到视频解码数据，将所述视频解码数据输入预先训练的神经网络模型进行处理，提取至少一个关键视频；

在对所述源视频数据解码之前，需要先创建mediacodec解码器和mediacodec编码器；配置所述mediacodec编码器时需要设置视频合成文件中多个所述关键视频之间的间隔；

其中，将所述视频解码数据输入预先训练的神经网络模型进行处理，提取至少一个关键视频包括：

将视频解码数据中至少一个具有所述虚拟对象的所述第一图像帧进行细节分割，得到多个具有虚拟对象的第二图像帧；

根据与所述多个具有虚拟对象的第二图像帧中相关的多模态信息，对所述多个具有虚拟对象的第二图像帧进行特征编码，得到用于表征所述多模态信息融合的特征融合信息，其中，多模态信息包括文本信息、音频信息、动作信息、色调信息和物体信息中的至少一种；

根据特征融合信息，对所述多个具有虚拟对象的第二图像帧进行相似度匹配，根据相似度匹配结果得到具有虚拟对象的关键视频；读取所述关键视频中的每个第二图像帧，并将读取后的所述每个第二图像帧依次存储至缓存队列中；在所述缓存队列中获取所述关键视频，将每个所述关键视频设置给所述mediacodec编码器；

利用OpenGL技术对所述具有虚拟对象的关键视频中每个具有虚拟对象的第二图像帧进行分段渲染，得到多个具有虚拟对象的第三图像帧；

利用mediacodec技术将所述多个具有虚拟对象的第三图像帧进行重新编码生成目标视频。

2.根据权利要求1所述的视频剪辑方法，其特征在于，所述利用OpenGL技术对所述具有虚拟对象的关键视频中每个具有虚拟对象的第二图像帧进行分段渲染，得到多个具有虚拟对象的第三图像帧：

创建OpenGL环境，将所述关键视频中每个具有虚拟对象的第二图像帧依次发送给绘图表面进行纹理操作；

利用绘图线程渲染当前具有虚拟对象的第二图像帧，当前具有虚拟对象的第二图像帧渲染完成后，再处理下一个具有虚拟对象的第二图像帧，直至每个关键视频中不存在具有虚拟对象的第二图像帧。

3.根据权利要求2所述的视频剪辑方法，其特征在于，所述利用mediacodec技术将所述多个具有虚拟对象的第三图像帧进行重新编码生成目标视频包括：

根据所述关键视频中多个具有虚拟对象的第二图像帧的渲染顺序，将关键视频中多个具有虚拟对象的第二图像帧整理成为一个对象；

将所述对象过一遍整体效果后输出到mediacodec编码器中进行编码，并提取封面帧。