[发明专利]基于JND因子的超像素高斯滤波预处理方法

说明书

技术领域

本发明涉及视频预处理领域，特别是涉及到基于JND因子的超像素高斯滤波预处理方法。

技术背景

随着信息技术的发展，尤其是高清视频和移动互联网的发展，多媒体视频的数量以及需求呈现快速的膨胀。新一代视频编码标准HEVC的发展较上一代的标准已经降低了50%的码率，发展下一代新的视频编码标准并带到实际的应用中仍然需要较长的发展时间，而通过结合视频预处理的技术，可以明显地提升视频编码的效率和提升其主观质量。

视频预处理技术是在视频进行编码前，对其进行的一系列处理操作，主要目的是为了降低码率和提升质量。经过多年的研究发展，视频预处理技术主要包括传统的滤波、插值和去隔行等方法。基于感兴趣区域的编码和JND相结合的预处理方法都可以有效地提升视频编码的质量和效率。

在常见的滤波操作中，可以滤除引入的噪声，同时也可以去除视觉冗余信息。然而整幅图像中人眼对各个区域的敏感程度不同，每个区域的平滑度和纹理复杂度也不相同，在常用的滤波操作中，虽然可以明显地降低码率，但是也会带来严重的主观质量的下降。

发明内容

本发明所要解决的技术问题是，提供一种基于JND因子的超像素高斯滤波预处理方法，以便能带来明显的码率的下降而不引起主观质量的损失。

为解决上述技术问题，本发明采用如下技术方案：一种基于JND因子的超像素高斯滤波预处理方法，其包括如下步骤：

步骤一、读入视频图像数据：逐帧读入视频图像数据进行处理；

步骤二、超像素划分：基于SLIC超像素方法将该图像分割成为预定大小且由相似像素组成的超像素，使得每个超像素内的各像素具有相似的平滑度和纹理区域；

步骤三、JND因子计算：计算超像素内每个像素点的基于视觉信息的JND因子并获得其平均值，并得出该平均值与图像纹理和平滑度的关联，所计算的JND因子为加权亮度平均差；

步骤四、超像素的自适应高斯滤波：根据超像素内JND因子的平均值确定该超像素的高斯滤波参数，再采用所述高斯滤波参数对对应的超像素进行高斯滤波操作，即获得预处理后的视频帧。

进一步地，步骤三中，所述JND因子的计算公式为：

      （1）

其中：   （2）

而为滤波器，表示位置的像素值。

进一步地，步骤四中，根据超像素内JND因子的平均值并采用如下阶梯函数公式确定该超像素的高斯滤波参数：

   （3）

其中，表示该超像素区域内的像素的JND因子的平均值，Treshold_lower和Treshold_upper为设定的该平均值的两个阈值，而b和c为该梯度函数的常量参数。

进一步地，步骤四中，超像素的边界区域综合所属超像素的系数的平均和。

通过采用上述技术方案，本发明具有以下技术效果：本发明通过将图像分割为相似像素组成的超像素，由于每个超像素内的像素具有相似的平滑度和纹理区域，因此进行滤波操作时，以超像素为单位，即超像素内的所有像素享有相同的滤波强度；并基于视觉的JND因子与图像平滑度关联，确定超像素高斯滤波参数进行滤波处理，而且本发明将超像素内的JND因子的平均值与高斯滤波方差关联起来，量化决定超像素进行高斯滤波操作的方差，该方差随着超像素的纹理和平滑度能自适应变化。从而，本发明最终可以通过结合人眼对图像区域的敏感程度对视频进行自适应的滤波操作，可以带来明显的码率的下降而不引起主观质量的损失，在码率上，相同参数下获得了平均9.3%、最高29%的码率下降，并且主观质量无明显下降。

附图说明

图1是本发明基于JND因子的超像素高斯滤波预处理方法的框架图。

图2是本发明一实施例中将视频帧划分为平均大小为16x16的超像素的示意图。

图3是本发明计算加权亮度平均值的滤波器示意图。

图4是本发明基于加权亮度平均值的重建图。

图5是本发明加权亮度平均值重建图三个选取区域值。

图6是本发明lena图像以及三个区域的高斯滤波对比。

图7是本发明预处理后的图像主观质量与原始图像。

具体实施方式

需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互结合，下面结合附图和具体实施例对本发明作进一步详细说明。