[发明专利]一种多视觉敏感特征相似度的全参考图像质量评价方法

摘要

本发明涉及一种基于多视觉敏感特征相似度的全参考型图像质量评价方法。本发明的具体步骤是：(一)输入失真图像和参考图像；(二)对失真图像和参考图像提取多角度的梯度特征，并计算梯度相似度；(三)对失真图像和参考图像提取相位特征，并计算相位特征相似度；(四)对失真图像和参考图像提取锐度特征，并计算锐度特征相似度；(五)将梯度相似度、相位相似度和锐度相似度融合成最终的图像质量评价指标。本发明采用对图像提取梯度、相位和锐度等视觉敏感特征，对视觉敏感特征相似度组合得到客观评价参数，提高了全参考图像质量评价的精度。

主权项

一种基于多视觉敏感特征相似度的全参考图像质量评价方法，其特征在于包含以下步骤：(1)输入参考图像和失真图像，对失真图像和参考图像提取多角度下的梯度特征。具体步骤如下：对失真图像和参考图像分别采用0°，45°，90°，和135°方向的Sobel算子提取出梯度信息，采用如下公式：$S_0=R\⊗P_0;S_{45}=R\⊗P_{45};S_{90}=R\⊗P_{90};S_{135}=R\⊗P_{135};$$T_0=D\⊗P_0;T_{45}=D\⊗P_{45};T_{90}=D\⊗P_{90};T_{135}=D\⊗P_{135};$其中D为失真图像，S为参考图像；P₀、P₄₅、P₉₀和P₁₃₅为0°，45°，90°，和135°方向的sobel算子；表示二维卷积运算；S₀、S₄₅、S₉₀和S₁₃₅分别是参考图像R经过0°，45°，90°，和135°方向的Sobel算子P₀、P₄₅、P₉₀和P₁₃₅卷积滤波后得到的图像；T₀、T₄₅、T₉₀和T₁₃₅分别是参考图像D经过0°，45°，90°，和135°方向的Sobel算子P₀、P₄₅、P₉₀和P₁₃₅卷积滤波后得到的图像；(2)计算失真图像和参考图像提取的多角度梯度特征之间的相似度，采用如下公式：$G_0(i,j)=\frac{{2S}_0(i,j)T_0(i,j)+c}{S_0{(i,j)}^2+T_0{(i,j)}^2+c}$$G_{45}(i,j)=\frac{{2S}_{45}(i,j)T_{45}(i,j)+c}{S_{45}{(i,j)}^2+T_{45}{(i,j)}^2+c}$$G_{90}(i,j)=\frac{{2S}_{90}(i,j)T_{90}(i,j)+c}{S_{90}{(i,j)}^2+T_{90}{(i,j)}^2+c}$$G_{135}(i,j)=\frac{{2S}_{135}(i,j)T_{135}(i,j)+c}{S_{135}{(i,j)}^2+T_{135}{(i,j)}^2+c}$(3)计算失真图像和参考图像提取的多角度梯度特征之间的相似度。采用如下公式：将0°，45°，90°，和135°方向的梯度相似度合成最终的合成梯度相似度，采用公式如下：$G(i,j)={\left[G_0(i,j)\right]}^{{\mathrm{\α}}_1}{\left[G_{45}(i,j)\right]}^{{\mathrm{\α}}_2}{\left[G_{90}(i,j)\right]}^{{\mathrm{\α}}_3}{\left[G_{135}(i,j)\right]}^{{\mathrm{\α}}_4}$(4)对输入失真图像和参考图像提取相位特征，具体采用步骤和公式如下：将失真图像D和参考图像S伸缩成像素为横向和纵向像素大小相等的图像D′和S′，对图像D′和S′进行二维离散傅里叶变换，并分别得到相位，具体采用公式如下：其中Y₁(u，v)是图像D′的二维离散傅里叶变换系数；Y₂(u，v)是图像S′的二维离散傅里叶变换系数；和是Y₁(u，v)和Y₂(u，v)的相位；re(·)表示取实部运算，im(·)表示取虚部运算；(5)计算图像D′和图像S′之间的相位相似度信息，计算公式如下：最后采用二维傅立叶反变换将相位相似度信息转换到空域，并调整其大小到原始尺寸，得到空域相位相似度P(i，j)，其中(i，j)为图像中某一像素的位置；(6)对输入失真图像和参考图像提取锐度特征，具体采用步骤和公式如下：首先，计算失真图像和参考图像(i，j)像素为中心的3×3邻域的平均灰度值，采用计算公式如下：$\stackrel{\‾}{D(i,j)}=\frac{1}{9}\underset{u=-1}{\overset{1}{\mathrm{\Σ}}}\underset{v=-1}{\overset{1}{\mathrm{\Σ}}}D(i+u,j+v)$$\stackrel{\‾}{R(i,j)}=\frac{1}{9}\underset{u=-1}{\overset{1}{\mathrm{\Σ}}}\underset{v=-1}{\overset{1}{\mathrm{\Σ}}}R(i+u,j+v)$然后，计算失真图像和参考图像(i，j)像素处的最大邻域灰度差值S(i，j)和T(i，j)，以最大领域灰度差值作为图像的锐度亮度，采用公式如下：$S(i,j)=\max |D(i+u,j+v)-\stackrel{\‾}{D(i,j)}|,\∀-1\≤u\≤1,-1\≤v\≤1$$T(i,j)=\max |R(i+u,j+v)-\stackrel{\‾}{R(i,j)}|,\∀-1\≤u\≤1,-1\≤v\≤1$(7)对输入失真图像和参考图像之间计算锐度相似度，具体采用步骤和公式如下：$H(i,j)=\frac{2S(i,j)T(i,j)+c}{S{(i,j)}^2+T{(i,j)}^2+c}$(8)组合梯度相似度、相位相似度和锐度相似度组成联合相似度判据，求其均值得到最终的相似度数值，具体公式如下：GPS_SSIM(i，j)＝[G(i，j)]^α[P(i，j)]^β[H(i，j)]^γ$\mathrm{GPS}\_\mathrm{SSIM}=\frac{1}{M\×N}\underset{i=1}{\overset{M}{\mathrm{\Σ}}}\underset{j=1}{\overset{N}{\mathrm{\Σ}}}\mathrm{GPS}\_\mathrm{SSIM}(i,j)$