[发明专利]一种运镜视频处理方法、系统、存储介质及电子设备

说明书

本发明涉及视频处理领域，尤其涉及一种运镜视频处理方法、系统、存储介质及电子设备。该方法包括：步骤1，获取运镜原始视频，提取所述运镜原始视频的n个单帧画面；步骤2，对每个单帧画面进行人体检测，得到人体的边界框以及人体的中心关键点；步骤3，将所述边界框以及所述中心关键点进行对图像剪裁范围进行计算；步骤4，对人体的边界框以及人体的中心关键点进行视频剪裁消抖计算，将计算结果与所述图像剪裁范围计算结果合并，得到单帧最终结果；步骤5，合并n个单帧最终结果，得到运镜视频。通过本发明可以达到剪辑处理后的视频素材的视觉连续性的效果。

技术领域

本发明涉及视频处理领域，尤其涉及一种运镜视频处理方法、系统、存储介质及电子设备。

背景技术

随着视频时代的到来，视频消费在人们日常的信息消费中所占的比重越来越大，但是视频生产的过程还是严重依赖人力。当一个多人舞团或多个艺人同台献艺时，在视频录制和后期剪辑中，为达到镜头切换单人特写的效果，现有的方式往往需要多台相机多个摄影师分别针对特写人群进行运镜，由导演控制镜头切换。但现有技术中过于依赖人工，且需要多台昂贵的摄影设备和多年拍摄经验的摄影师。成本和效率都是比较低下的。另外，在视频剪辑中因为视频抖动无法剪辑处理后的视频素材的视觉连续性。

发明内容

本发明所要解决的技术问题是提供一种运镜视频处理方法、系统、存储介质及电子设备。

本发明解决上述技术问题的技术方案如下：一种运镜视频处理方法，包括：

步骤1，获取运镜原始视频，提取所述运镜原始视频的n个单帧画面；

步骤2，对每个单帧画面进行人体检测，得到人体的边界框以及人体的中心关键点；

步骤3，将所述边界框以及所述中心关键点进行对图像剪裁范围进行计算；

步骤4，对人体的边界框以及人体的中心关键点进行视频剪裁消抖计算，将计算结果与所述图像剪裁范围计算结果合并，得到单帧最终结果；

步骤5，合并n个单帧最终结果，得到运镜视频。

本发明的有益效果是：通过对人体的边界框以及人体的中心关键点的检测以及确认，提高了检测以及追踪人体的效率，并且，通过对上述数据的检测以及确认还可以快速将画面剪辑出来，减少了设备以及人工成本，此外，本申请还在得到人体的边界框以及人体的中心关键点后添加了视频剪裁消抖计算，保证了剪辑处理后的视频素材的视觉连续性。

在上述技术方案的基础上，本发明还可以做如下改进。

进一步，步骤1具体为：

获取运镜原始视频，通过跨平台计算机视觉库提取所述运镜原始视频的n个单帧画面。

进一步，步骤2具体为：

通过开源的yolov4人体检测模型对每个单帧画面进行人体检测，判断是否有人体，若无，则重复步骤2直至判断单帧画面中有人体，若有，则通过yolov4人体检测模型对每个单帧画面进行检测，得到人体的边界框，通过简单基线对每个单帧画面进行检测，得到人体的中心关键点。

进一步，步骤3具体为：

根据所述边界框、所述中心关键点以及视频素材分辨率的需求，对图像剪裁范围进行计算。

进一步，视频剪裁消抖计算的公式为：

A'_n＝0.8×A_n-1+0.2A_n

其中，A'_n为消抖后的人体的边界框或人体的中心关键点，A_n-1为上一帧的人体的边界框或人体的中心关键点，A_n为待消抖的人体的边界框或人体的中心关键点。