[发明专利]一种视频处理方法、装置及设备

说明书

本发明实施例提供了一种视频处理方法、装置及设备，该方法包括：获取待处理视频；确定待处理视频中的每个视频图像组；针对每个视频图像组，分别确定该视频图像组中的参考图像与模糊图像；利用参考图像对所述模糊图像进行去模糊处理。可见，本方案中，先确定待处理视频中的每个视频图像组，其中，同一个视频图像组中的视频图像为属于同一组镜头的图像；分别确定每个视频图像组中的参考图像与模糊图像；利用去模糊模型，将参考图像特征与模糊图像特征进行特征融合，得到融合特征；根据融合特征重建图像。利用属于同一组镜头的视频图像作为模糊图像的参考图像，使得参考图像选取得更为合理，优化了视频去模糊的效果。

技术领域

本发明涉及智能分析技术领域，特别是涉及一种视频处理方法、装置及设备。

背景技术

在拍摄视频的过程中，由于拍摄设备的抖动、被拍摄目标的运动等因素的影响，使得视频图像中会出现一定程度的模糊。模糊的视频图像不利于观察和提取视频图像中的细节信息，因此需要对视频进行去模糊处理。

目前，主要的视频去模糊处理方案包括：对于需要进行去模糊处理的每帧视频图像来说，可以参考该帧视频图像的相邻帧视频图像，对该帧视频图像的缺失内容进行修复，从而实现视频去模糊。例如，以眼睛为拍摄目标的两帧连续视频图像，在第一帧视频图像中，眼睛的左半部分清晰而右半部分模糊；在第二帧视频图像中，眼睛的左半部分模糊而右半部分清晰；这样，就可以参考第一帧视频图像，对第二帧视频图像中眼睛的左半部分进行修复；可以参考第二帧视频图像，对第一帧视频图像中眼睛的右半部分进行修复，从而实现视频去模糊。

上述方案中，参考相邻帧视频图像对模糊帧视频图像中的缺失内容进行修复。然而，在视频的实际拍摄过程中，模糊的视频图像往往是连续出现的，这意味着，模糊帧视频图像的相邻帧视频图像往往也是模糊的，无法对模糊帧视频图像中的像素信息进行补足，视频去模糊效果不佳。

发明内容

本发明实施例的目的在于提供一种视频处理方法、装置及设备，以优化视频去模糊效果。具体技术方案如下：

为达到上述目的，本发明实施例提供了一种视频处理方法，包括：

获取待处理视频；

确定所述待处理视频中的每个视频图像组，其中，同一个视频图像组中的视频图像为属于同一组镜头的图像；

针对每个视频图像组，分别确定该视频图像组中的参考图像与模糊图像；

利用所述参考图像对所述模糊图像进行去模糊处理。

可选的，所述利用所述参考图像对所述模糊图像进行去模糊处理，包括：

将所述参考图像与所述模糊图像输入至预先建立的去模糊模型，得到去模糊后的模糊图像；

其中，建立所述去模糊模型的过程包括：

获取参考样本图像与模糊样本图像；

将所述参考样本图像和所述模糊样本图像输入至预设结构的去模糊网络中，利用所述去模糊网络提取所述参考样本图像的图像特征，得到参考特征；提取所述模糊样本图像的图像特征，得到模糊特征；将所述参考特征与所述模糊特征进行特征融合，得到融合特征；利用所述融合特征进行图像重建，得到重建图像；

基于所述参考样本图像与所述重建图像的清晰度差异，判断所述去模糊网络的损失函数是否收敛，若否，则对所述去模糊网络中的参数进行调整，并返回所述将所述参考样本图像和所述模糊样本图像输入至预设结构的去模糊网络中的步骤；若是，则得到训练完成的去模糊模型。

可选的，所述确定所述待处理视频中的每个视频图像组，包括：

按照所述待处理视频的帧序号，依次确定所述待处理视频的当前帧视频图像；

计算所述当前帧视频图像与其上一帧视频图像的相似度；