[发明专利]一种融合双深度学习网络的无参考视频质量评价方法

权利要求书

1.一种融合双深度学习网络的无参考视频质量评价方法，其特征在于:将视频内每一帧的视频图像I_t输入至无参考视频质量评价网络，无参考视频质量评价网络首先通过双深度学习网络提取获得视频图像I_t的深度特征F_t，深度特征F_t经过ANN网络进行特征降维处理后输入双向门控循环网络，通过双向门控循环网络构建视频帧特征之间的联系获取视频帧质量分数q_t，然后视频帧质量分数q_t经过改进的时间记忆模型获得视频质量分数预测分量Q₁，同时视频帧质量分数q_t经过高斯分布回归预测模型获得视频质量分数预测分量Q₂，视频质量分数预测分量Q₁和视频质量分数预测分量再经过调节因子ρ进行优化调节获得最终的视频质量分数Q。

2.根据权利要求1所述的一种融合双深度学习网络的无参考视频质量评价方法，其特征在于：

所述双深度学习网络包括并联的InceptionV3网络和ResNet50网络，所述深度特征F_t为：

其中，表示卷积操作，g_mean为全局平均池化g_mean，g_std为全局标准差池化，表示在InceptionV3网络下的深度特征映射，表示在ResNet50网络下的深度特征映射：

3.根据权利要求2所述的一种融合双深度学习网络的无参考视频质量评价方法，其特征在于：

所述视频帧质量分数q_t为：

其中，ω_t为视频帧质量信息的权重，b_t为视频帧质量信息的偏差参数，表示视频内每一帧图像I_t在通过双向门控循环网络后所得特征：

其中，BiGRU(·)表示双向门控循环网络操作，ANN(·)表示ANN网络的降维操作；

所述ANN网络包含两个全连接层和一个dropout层。

4.根据权利要求3所述的一种融合双深度学习网络的无参考视频质量评价方法，其特征在于：

所述改进的时间记忆模型包括在时间记忆模型的拟合过程中加入了正比例函数拟合与指数函数拟合获得记忆影响因素且在softmin-weighted模块的可微的softmin函数中加入参数ε获得视觉滞留影响因素引入参数δ用于的平衡记忆影响因素和视觉滞留影响因素以此获得第t帧图像的质量评分Q′_t，然后获得改进的时间记忆模型的预测分量Q₁，具体为：

在t_m∈(t-τ,t-1)帧对第t帧的记忆影响因素为：

其中，q_m表示进行最小值池化操作后得到的帧质量分数，l_t1和l_t2分别表示利用正比例函数和指数函数进行拟合得到的结果，V_p＝{t-τ,...,t-2,t-1}；

在t_c∈(t,t+τ)内的视频图像对第t帧图像的视觉滞留影响因素为：

其中，代表每帧图像的权重，V_c＝{t,t+1,...,t+τ}，ε为参数，q_n表示q_t在t∈(t,t+τ)时的视频帧质量分数；

所述视频质量分数预测分量Q₁为：

5.根据权利要求4所述的一种融合双深度学习网络的无参考视频质量评价方法，其特征在于：

所述视频质量分数预测分量Q₂为：

其中，q_c为经过平均值池化操作后所得特征，L为经过双向GRU处理后的特征维度，T为视频中总图像数；μ_c和σ_c分别为当前整个视频中所有帧经过平均值池化所得特征的均值和方差。