[发明专利]一种基于视觉多重特征深度融合处理的全参考图像质量客观评价方法有效
申请号: | 201810359227.3 | 申请日: | 2018-04-20 |
公开(公告)号: | CN108648180B | 公开(公告)日: | 2020-11-17 |
发明(设计)人: | 丰明坤;王中鹏;葛丁飞;吴茗蔚;林志洁;施祥;孙丽慧;向桂山 | 申请(专利权)人: | 浙江科技学院 |
主分类号: | G06T7/00 | 分类号: | G06T7/00;G06N3/04;G06K9/62 |
代理公司: | 杭州天勤知识产权代理有限公司 33224 | 代理人: | 曹兆霞 |
地址: | 310023 浙*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 视觉 多重 特征 深度 融合 处理 参考 图像 质量 客观 评价 方法 | ||
1.一种基于视觉多重特征深度融合处理的全参考图像质量客观评价方法,其特征在于,包括:
步骤1,选取一个图像质量数据库,对其中包含的参考图像和失真图像进行预处理得到相应的图像灰度矩阵;
步骤2,将失真图像分为训练集和测试集,并计算测试集中所有失真图像灰度矩阵的梯度特征评价结果;
步骤3,提取所有参考图像灰度矩阵和失真图像灰度矩阵的视觉多通道梯度特征信息视图,并计算所有失真图像灰度矩阵的视觉多通道梯度特征评价;
步骤4,设计视觉多通道梯度特征-直方图误差深度信息处理评价算法,并计算所有失真图像质量的视觉多通道梯度-直方图深度信息评价,其中,所述失真图像质量的视觉多通道梯度-直方图深度信息评价算法如下:
VGHISTs,o=mean[VGHISTs,o(L)]
式中,mean[·]代表求平均值,VGHISTs,o表示失真图像质量的视觉多通道梯度-直方图深度信息评价,VGHISTs,o(L)代表对视觉通道(s,o)的梯度特征视图进行分块后,第L个子块的梯度特征-直方图深度信息评价,VGHISTs,o(L)的计算公式如下:
VGHISTs,o(L)=VGHISTLs,o(L)β1·VGHISTCs,o(L)β2
式中,VGHISTLs,o(L)代表第L个子块的梯度-直方图灰度信息误差评价,VGHISTCs,o(L)代表第L个局部子块的梯度-直方图对比度信息误差评价,β1,β2为权重系数,VGHISTLs,o(L)和VGHISTCs,o(L)定义分别如下:
VGHISTLs,o(L)=|EGHISTLs,o(L)-EGHISTLs,omid|
VGHISTCs,o(L)=|EGHISTCs,o(L)-EGHISTCs,omid|
式中,EGHISTLs,o(L)和EGHISTCs,o(L)分别是第L个局部子块梯度-直方图的灰度均方根误差和对比度均方根误差,EGHISTLs,omid和EGHISTCs,omid为EGHISTLs,o(L)和EGHISTCs,o(L)的中间值大小,其定义分别如下:
EGHISTLs,omid=mean[EGHISTLs,o(L)]
EGHISTCs,omid=mean[EGHISTCs,o(L)]
式中,VGHISTLx(s,o)(L,i)和VGHISTLy(s,o)(L,i)分别为参考图像和失真图像的视觉通道梯度-直方图局部块L的灰度信息,VGHISTCx(s,o)(L,i)和VGHISTCy(s,o)(L,i)分别为参考图像和失真图像的视觉通道梯度-直方图局部块L的对比度信息,NL=max(NL1,NL2),NL1、NL2分别为VGHISTLx(s,o)(L,i)和VGHISTLy(s,o)(L,i)的直方图统计系数的数目,NL=max(NL1,NL2)是取NL1和NL2中的最大值;
所述计算所有失真图像质量的视觉多通道梯度-直方图深度信息评价过程为:
对所有失真图像灰度矩阵的视觉多通道梯度特征评价进行直方图变换,得到所有失真图像质量的视觉多通道梯度-直方图深度信息评价;
步骤5,设计视觉多通道梯度特征-奇异值分解误差深度信息处理评价算法,并计算所有失真图像质量的视觉多通道梯度-奇异值深度信息评价,其中,所述失真图像质量的视觉多通道梯度-奇异值深度信息评价算法如下:
VGSVDs,o=mean[VGSVDs,o(L)]
式中,VGSVDs,o为失真图像质量的视觉多通道梯度-奇异值深度信息评价,mean[·]代表求平均值,VGSVDs,o(L)代表对视觉通道(s,o)的梯度特征视图进行分块后,第L个子块的梯度特征-奇异值深度信息评价,VGSVDs,o(L)的计算公式如下:
VSVDs,o(L)=|Ds,o(L)-Ds,omid|
式中,Ds,o(L)是子块L的奇异特征值的均方根误差,Ds,omid为Ds,o(L)的中间值大小,Ds,o(L)和Ds,omid的定义分别如下:
Ds,omid=mean[Ds,o(L)]
式中,sxs,o(i),sys,o(i)分别代表参考图像和失真图像视觉通道(s,o)的梯度特征信息视图中第L个子块的奇异特征值系数,ML=max(ML1,ML2),ML1、ML2分别为参考图像和失真图像视觉通道(s,o)的梯度特征信息视图中第L个子块所包含的奇异特征值系数的数目,ML=max(ML1,ML2)是取ML1和ML2中最大值;
所述计算所有失真图像质量的视觉多通道梯度-奇异值深度信息评价具体过程为:
对所有失真图像灰度矩阵的视觉多通道梯度特征评价进行奇异值分解变换,得到所有失真图像质量的视觉多通道梯度-奇异值深度信息评价;
步骤6,构建BP神经网络视觉多通道图像质量融合评价模型;
步骤7,利用训练集中所有失真图像灰度矩阵的视觉多通道梯度特征评价对构建的BP神经网络视觉多通道图像质量融合评价模型进行训练后,将测试集中的失真图像灰度矩阵的视觉多通道梯度特征评价输入到训练好的BP神经网络视觉多通道图像质量融合评价模型进行预测,输出失真图像质量的视觉多通道梯度特征融合评价结果,并对该结果进行偏置处理;
步骤8,利用训练集中所有失真图像质量的视觉多通道梯度-直方图深度信息评价对构建的BP神经网络视觉多通道图像质量融合评价模型进行训练后,将测试集中的失真图像质量的视觉多通道梯度-直方图深度信息评价输入到训练好的BP神经网络视觉多通道图像质量融合评价模型进行预测,输出失真图像质量的视觉多通道梯度-直方图深度信息融合评价结果,并对该结果进行偏置处理;
步骤9,利用训练集中所有失真图像质量的视觉多通道梯度-奇异值深度信息评价对构建的BP神经网络视觉多通道图像质量融合评价模型进行训练后,将测试集中的失真图像质量的视觉多通道梯度-奇异值深度信息评价输入到训练好的BP神经网络视觉多通道图像质量融合评价模型进行预测,输出失真图像质量的视觉多通道梯度-奇异值深度信息融合评价结果,并对该结果进行偏置处理;
步骤10,对步骤2、步骤7、步骤8以及步骤9所得结果进行融合,获得失真图像质量的视觉多重特征深度融合处理评价结果,具体包括:
最内层融合公式如下:
式中,参数γ11和γ12根据经验和实验训练取值,VGSVD为失真图像质量的视觉多通道梯度-奇异值深度信息评价,VGHIST为失真图像质量的视觉多通道梯度-直方图深度信息评价;
第二层融合公式如下:
式中,参数γ21和γ22根据经验和实验训练取值,VG为失真图像灰度矩阵的视觉多通道信息视图的梯度特征评价,A为完成偏置处理的同一个正的常数;
最外层融合公式如下:
式中,MVFF代表失真图像质量的最终评价结果,参数γ31和γ32根据经验和实验训练取值,为失真图像灰度矩阵的梯度特征评价GSM的误差等价转换,转换公式如下:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江科技学院,未经浙江科技学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810359227.3/1.html,转载请声明来源钻瓜专利网。