[发明专利]一种视频超分辨率处理方法

权利要求书

1.一种视频超分辨率处理方法，其特征在于：包括以下步骤：对接收的待处理的视频中的各帧图像进行如下处理操作：

1）将当前帧图像划分为多个图像块；

2）对当前帧图像中的各个图像块，分别进行如下处理，得到各个图像块的超分辨率图像块：

21）在当前帧图像中检测获取当前图像块的相似块和/或在当前帧图像的前L帧、后K帧图像中检测获取当前图像块对应的图像块的相似块，得到当前图像块的多个相似块；其中，L和K均为大于等于0的整数，且L和K不同时为0，具体取值由用户根据处理精度和处理速度的要求进行设定；

22）对当前图像块的多个相似块分别进行上采样处理，得到各相似块的上采样图像块；

23）将各相似块的上采样图像块融合成一个超分辨率图像块；

3）按照各个图像块在当前帧图像中的位置，将各个图像块的超分辨率图像块整合成一幅图像，得到当前帧图像的超分辨率处理图像。

2.根据权利要求1所述的视频超分辨率处理方法，其特征在于：所述步骤21）检测获取当前图像块或者当前图像块对应的图像块的相似块时包括如下步骤：100）检测获取多个候选块；200）计算各个候选块与当前待寻找相似块的图像块的颜色距离；300）比较各个候选块对应的颜色距离与设定的阈值之间的大小，将颜色距离小于所述阈值的候选块保留作为当前待寻找相似块的图像块的相似块。

3.根据权利要求2所述的视频超分辨率处理方法，其特征在于：所述步骤100）中还包括扩充候选块的步骤：将得到的所述候选块对称翻转或者左右旋转多个角度得到多个转动块，也作为当前图像块的候选块；其中多个角度为遍布0°～90°范围内等间隔分布的多个角度。

4.根据权利要求2或3所述的视频超分辨率处理方法，其特征在于：所述步骤100）和步骤200）之间还包括筛选多个所述候选块的步骤100’）：a）计算当前图像块中像素点的像素值的均值或者方差；b）计算各个候选块中像素点的像素值的均值或者方差；c）计算步骤b）中均值或者方差与步骤a）中均值或者方差的差值；d）比较所述均值或者方差的差值与设定的均值或者方差的阈值的大小，保留所述差值小于所述阈值的候选块，去除所述差值大于等于所述阈值的候选块。

5.根据权利要求2所述的视频超分辨率处理方法，其特征在于：所述步骤100）包括以下步骤：p）以当前待寻找相似块的图像块为中心，设定W×W大小的窗口，其中，W为用户设定的经验值；q）在所述窗口中，取左上角块，所述左上角块的形状、大小与当前待寻找相似块的图像块的形状、大小相同；r）将所述左上角块沿着水平向右和竖直向下的方向按设定的步进尺度滑动，得到多个候选块。

6.根据权利要求1所述的视频超分辨率处理方法，其特征在于：所述步骤22）中，上采样处理时采用bicubic/nnedi3插值算法或者SmartEdge上采样算法。

7.根据权利要求1所述的视频超分辨率处理方法，其特征在于：所述步骤23）中融合时，对于当前图像块中的当前像素点，取各上采样图像块中的相应像素点，计算相应像素点的像素值的中值、平均值或者加权平均值，作为当前像素点在超分辨率图像块中的像素值；其中，加权系数根据当前图像块与上采样图像块对应的相似块之间的颜色距离确定，与颜色距离成反比，具体取值为用户设定的经验值。

8.根据权利要求1所述的视频超分辨率处理方法，其特征在于：所述步骤1）中划分图像时，将相邻图像块之间重叠2～5个像素点宽度的范围划分图像；所述步骤3）整合时，未重叠的位置处的图像，直接取相应超分辨率图像块中相应像素点的像素值；重叠的位置处的图像，取重叠处涉及的超分辨率图像块中相应像素点的像素值的平均值。

9.根据权利要求1所述的视频超分辨率处理方法，其特征在于：所述步骤1）中划分图像时，按照设定的固定形状划分图像或者根据当前帧图像中像素点的像素值计算出自适应的图像块形状后按照自适应的图像块形状划分图像。

10.根据权利要求1所述的视频分辨率处理方法，其特征在于：还包括输出视频的步骤：将处理后得到的各帧超分辨率处理图像按照时间顺序进行整合，输出超分辨率处理后的视频。