[发明专利]视频超分处理方法、视频超分处理装置及存储介质

说明书

本公开是关于一种视频超分处理方法、视频超分处理装置及存储介质。视频超分处理方法包括：获取待处理视频，并确定所述待处理视频中的待处理帧画面；若所述待处理帧画面的分辨率大于分辨率阈值，则确定所述待处理帧画面中的第一处理区域，并基于深度学习模型对所述第一处理区域进行超分处理，所述第一处理区域为所述待处理帧画面中的部分区域。通过本公开实施例，在保证对待处理视频进行视频超分处理效果的同时，满足视频超分的实时性需求，实现了视频超分效果和视频超分实时性二者之间的平衡。

技术领域

本公开涉及视频处理技术领域，尤其涉及视频超分处理方法、视频超分处理装置及存储介质。

背景技术

随着技术的发展，在医学成像，视频监控和遥感成像等领域中，高分辨率的视频会给用户带来更清晰、更舒适的视觉体验，相关的技术研究也被广为关注。然而，在现实生活中，由于成像设备限制、大气扰动及场景运动变化等因素影响，实际获取的视频往往分辨率较低，给后续的视频处理和分析带来困难，难以满足人们的需求。

由此诞生的超分辨率重建技术，其基本任务是对原始的低分辨率图像或视频重构出对应的高分辨率图像或视频。实现分辨率提升的超分辨率重建技术成为图像处理领域的一个研究热点。

发明内容

为克服相关技术中存在的问题，本公开提供视频超分处理方法、视频超分处理装置及存储介质。

根据本公开实施例的一方面，提供一种视频超分处理方法，包括：获取待处理视频，并确定所述待处理视频中的待处理帧画面；若所述待处理帧画面的分辨率大于分辨率阈值，则确定所述待处理帧画面中的第一处理区域，并基于深度学习模型对所述第一处理区域进行超分处理，所述第一处理区域为所述待处理帧画面中的部分区域。

在一实施例中，所述视频超分处理方法还包括：若所述待处理帧画面的分辨率小于所述分辨率阈值，则基于所述深度学习模型对所述待处理帧画面的整个区域进行超分处理。

在一实施例中，确定所述待处理帧画面中的第一处理区域包括：将所述待处理帧画面中，以所述待处理帧画面的几何中心为中心的设定范围内的区域，确定为所述第一处理区域；和/或将所述待处理帧画面中，相邻的所述待处理帧画面中相同位置处、像素值差值大于设定像素差值阈值的像素点所在区域，确定为所述第一处理区域。

在一实施例中，在进行超分处理之前，所述视频超分处理方法还包括：对所述待处理帧画面进行去模糊处理。

在一实施例中，对所述待处理帧画面进行去模糊处理，包括：基于所述深度学习模型对所述待处理帧画面进行去模糊处理。

在一实施例中，所述视频超分处理方法还包括：基于图像平滑处理方法对所述待处理帧画面的第二处理区域进行超分处理，所述第二处理区域为所述待处理帧画面中除所述第一处理区域以外的其它区域。

根据本公开实施例的又一方面，提供一种视频超分处理装置，所述视频超分处理装置包括：获取模块，用于获取待处理视频；确定模块，用于确定所述待处理视频中的待处理帧画面，以及若所述待处理帧画面的分辨率大于分辨率阈值，则确定所述待处理帧画面中的第一处理区域，所述第一处理区域为所述视频帧画面中的部分区域；超分处理模块，用于对所述第一处理区域基于深度学习模型进行超分处理。

在一实施例中，所述处理模块还用于：当所述待处理帧画面的分辨率小于所述分辨率阈值时，基于所述深度学习模型对所述待处理帧画面进行超分处理。

在一实施例中，所述第一处理区域为所述视频帧画面中的运动区域和/或中央区域，所述确定模块还用于：将所述视频帧画面的几何中心所在的区域确定为所述第一处理区域；以及，若所述待处理视频的相邻视频帧画面中相同像素位置，像素值的差值大于设置的阈值时，确定所述像素位置所在的区域为所述第一处理区域。

在一实施例中，所述视频超分处理装置还包括：去模糊处理模块，用于对所述待处理帧画面进行去模糊处理。