[发明专利]一种基于双路视频的超分辨重建方法

说明书

一种基于双路视频的超分辨重建方法，本发明涉及视频超分辨重建方法。本发明的目的是为了解决现有视频采集过程中受运动以及传感器采集图像质量的影响，空间分辨率低的问题。一种基于双路视频的超分辨重建方法过程为：步骤一、获取双路视频图像；步骤二、对步骤一获取的双路视频图像进行时间和空间配准，得到变换矩阵H；步骤三、基于变换矩阵H，采用超分辨算法对步骤一获得的双路视频图像进行处理，得到修正后的的参考视角视频；步骤四、将得到修正后的参考视角视频由USB总线输出，在上位机上进行显示。本发明用于图像处理领域。

技术领域

本发明涉及视频超分辨重建方法。

背景技术

在传统的视频监控或视频采集中，受传感器图像采集过程中许多条件的影响，当画面中出现一些远距离拍摄物时，拍摄的视频中空间分辨率较低，丢失很多我们实际关心的图像细节内容，视觉上无法分辨出更多的有用信息。同时，在3D视频采集、多视角视频监控等情况下，多源视频的时间空间非冗余信息没有得到充分的利用。针对现有的视频分辨率问题，如何利用多源图像间的非冗余信息对图像序列分辨率进行提高，已经成为了实际研究中的重点难点。DSP(digital signal processor，数字信号处理器)是一种数字信号处理器，将模拟信号转换成数字信号，强调数字信号处理的实时性，用于专用处理器的高速实时处理。它具有高速，灵活，可编程，低功耗的界面功能，在图形图像处理，语音处理，信号处理等通信领域起到越来越重要的作用。在视频图像处理中，DSP由于其强大数据处理能力和高运行速度，有着显著的优势。视频处理的速度和数据量对硬件要求较高，也是目前的难点与解决重点，所以DSP的巧妙结合与应用则尤为重要。

发明内容

本发明的目的是为了解决现有视频采集过程中受运动以及传感器采集图像质量的影响，空间分辨率低的问题，而提出一种基于双路视频的超分辨重建方法。

一种基于双路视频的超分辨重建方法具体过程为：

步骤一、获取双路视频图像；

步骤二、对步骤一获取的双路视频图像进行时间和空间配准，得到变换矩阵H；

步骤三、基于变换矩阵H，采用超分辨算法对步骤一获得的双路视频图像进行处理，得到修正后的的参考视角视频；

步骤四、将得到修正后的参考视角视频输出，在上位机上进行显示。

本发明的有益效果为：

本发明充分利用多源视频的非冗余信息，提出一种基于双路视频的超分辨重建方法，基于双路视频对其中一路视频重建，在消除伪影的同时提高图像细节的分辨率，使整体视频画面质量提高。

本发明针对拍摄的视频图像画面中出现一些远距离拍摄物时，视频中空间分辨率出现下降，同时3D视频拍摄时多源图像无法得到充分利用的现状出发，设计出针对此现象的超分辨算法解决方案并具有良好的实验效果，以DSP或PC为计算核心，对输入图像进行高精度配准，同时完成对细节部分分辨率的提高，从而提升整体视频图像的质量和视觉效果。

现有的大多数超分辨方法和算法没有考虑到多源视频输入的条件，仅从单视频亚像素精度的非冗余空间信息出发，去提升重建视频的质量。此外，大多数多源视频超分辨都是从混合分辨率的角度出发，去提升视频信号传输的效率。许多超分辨算法都基于样例输入，离不开卷积和训练操作，计算量骤增，且很不利于在硬件系统中实现。本发明中的方法复杂度低，为未来的双摄或者多摄像头拍摄以及红外成像获得更高分辨率视频提出了一种新的思路和方法。