[发明专利]一种无参考的图像去雨质量评价系统

摘要

本发明提出一种无参考的图像去雨质量评价系统，包括多尺度特征前向提取路径、多尺度特征后向提取路径、门控融合模块以及分数预测模块；待评价图像输入至多尺度特征前向提取路径后，再经多尺度特征后向提取路径输出多尺度特征至门控融合模块，门控融合模块对各尺度特征进行加权融合后输出至分数预测模块得到分数。双向门控融合网络先通过前向路径得到高维特征，再通过后向路径得到更多图像局部内容、上下文信息，最终通过门控融合得到图像的多尺度特征。本发明用来预测人类对不同去雨结果的感知质量，有助于在真实的雨景中评估和开发。

主权项

1.一种无参考的图像去雨质量评价系统，其特征在于，包括多尺度特征前向提取路径、多尺度特征后向提取路径、门控融合模块以及分数预测模块；待评价图像输入至多尺度特征前向提取路径后，再经多尺度特征后向提取路径输出多尺度特征至门控融合模块，门控融合模块对各尺度特征进行加权融合后输出至分数预测模块得到分数；多尺度特征前向提取路径包括1个卷积与ReLU块、1个最大池化模块、尺度从大到小的N级特征前向提取单元；多尺度特征后向提取路径包括尺度从小到大的N级特征后向提取单元、N‑1级上采样模块、N‑1级加法运算模块以及N级空间金字塔池化模块；多尺度特征前向提取路径中，待评价图像输入卷积与ReLU块后经最大池化模块后输入至逐级串联的特征前向提取单元，除第N级之外的每级尺度下的特征前向提取单元输出至下一级特征前向提取单元以及多尺度特征后向提取路径中相同尺度的特征提取模块中，第N级特征前仅向提取单元输出至多尺度特征后向提取路径中第1级特征后向提取单元；多尺度特征后向提取路径中，第1级特征后向提取单元输出至下一级的上采样模块输入端以及第1级空间金字塔池化模块，除第1级以及第N级之外的每级尺度的特征后向提取单元输出至本级加法运算模块，本级加法运算模块对本级特征后向提取单元的输出以及本级上采样模块的输出进行加运算后输出至本级空间金字塔池化模块以及下一级上采样模块；第N级特征后向提取单元输出至本级加法运算模块，本级加法运算模块对本级特征后向提取单元的输出以及本级上采样模块的输出进行加运算后输出至本级空间金字塔池化模块。