[发明专利]一种基于通道注意力机制的图像质量增强方法在审

专利信息
申请号: 202110474102.7 申请日: 2021-04-29
公开(公告)号: CN113160198A 公开(公告)日: 2021-07-23
发明(设计)人: 颜成钢;肇恒润;孙垚棋;张继勇;李宗鹏;张勇东 申请(专利权)人: 杭州电子科技大学
主分类号: G06T7/00 分类号: G06T7/00;G06T5/00;G06N3/04;G06N3/08
代理公司: 杭州君度专利代理事务所(特殊普通合伙) 33240 代理人: 朱月芬
地址: 310018 浙*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 通道 注意力 机制 图像 质量 增强 方法
【权利要求书】:

1.一种基于通道注意力机制的图像质量增强方法,其特征在于,步骤如下:

步骤一,将高质量原图处理成对应的低质量图像,得到低质量-高质量图像对照组;

步骤二,搭建图像增强网络模型;

步骤三,通过步骤一得到的低质量图像训练图像增强网络模型;

步骤四,将低质量的图像输入训练好的图像增强网络模型得到高质量图像。

2.根据权利要求1所述的一种基于通道注意力机制的图像质量增强方法,其特征在于,步骤一具体方法如下:

通过对高质量原图进行JPEG压缩,(QF30)或改变曝光度(增加或降低曝光度在±3EV之间)的方法使图像的质量降低,得到低质量-高质量图像对照组;

将成对的低质量-高质量图像对照组进行相同的随机反转和旋转操作,为加快训练速度,将低质量-高质量图像对照组再进行随机选取裁剪位置的裁剪操作,裁剪成128*128的图像。

3.根据权利要求2所述的一种基于通道注意力机制的图像质量增强方法,其特征在于,步骤二具体方法如下;

图像增强网络模型包括图像增强网络模型包括降采样部分,残差网络部分,通道注意力模块,上采样部分组成;其中降采样部分包括两级PixelUnshuffle和一个卷积核大小为3*3的二维卷积,残差网络部分包括由N个结构相同的残差块组成的残差块部分和一个卷积核大小为3*3的二维卷积构成,上采样部分包括两级Pixel Shuffle和一个卷积核大小为3*3的二维卷积;

输入图像为经过步骤一处理后的低质量图像;

图像增强网络模型的结构如下,其中:

降采样部分(Down Scale)采用两级Pixel Unshuffle方法对图像进行四倍降采样处理,将具有RGB三通道的图像输入,首先使用缩放倍数为2的PixelUnshuffle方法将图像的长和宽缩小为输入图像的1/2,通道数变为12,然后使用卷积核大小为3*3的二维卷积将图像由12通道转为64通道,再使用缩放倍数为2的Pixel Unshuffle方法将图像的长和宽缩小为输入图像的1/4,通道数变为256,最后使用卷积核大小为3*3的二维卷积将图像由256通道转为64通道;

残差块部分为N个结构相同的残差块(ResidualBlock),每个残差块由卷积核大小为3*3的二维卷积、线性整流单元、卷积核大小为3*3的卷积组成,个数N为16;

Conv3*3为一个卷积核大小为3*3的二维卷积;

通道注意力模块(SeBlock),由步长为2的3*3二维卷积、全局池化层、全连接层、线性整流单元、全连接层、Sigmoid激活函数构成;SeBlock首先对卷积得到的特征图进行Squeeze操作,得到通道级的全局特征,然后对全局特征进行Excitation操作,学习各个通道间的关系,也得到不同通道的权重,最后乘以原来的特征图得到最终特征;这种注意力机制让模型可以更加关注信息量最大的通道特征,而抑制那些不重要的通道特征;从而使特征被更好的利用;

上采样部分(Up Scale)采用两级Pixel Shuffle方法对图像进行四倍上采样处理,首先通过一个卷积核大小为3*3的二维卷积将特征图的通道数由64变为256,然后使用缩放倍数为2的PixelShuffle方法将图像的长和宽放大为输入特征图的2倍,通道数变为64,再使用一个卷积核大小为3*3的二维卷积将特征图的通道数由64变为256,最后使用缩放倍数为2的Pixel Shuffle方法将图像的长和宽放大为输入特征图的4倍,通道数变为64,最后使用一个卷积核大小为3*3的二维卷积将64通道的特征图转换为RGB三通道的经过网络增强后的高质量图像输出。

4.根据权利要求3所述的一种基于通道注意力机制的图像质量增强方法,其特征在于,步骤三具体方法如下;

训练采用Adam优化器作为优化器,采用Charbonnier Loss作为损失函数;

训练过程中,初始学习率设定为1e-4,每n个epoch学习率降为当前学习率的一半,前期较高的学习率能使网络快速收敛,后期较低的学习率能使模型进行微调,让模型效果更优,epoch数n根据训练数据集样本大小及训练效果决定,当学习率低于1e-6时结束训练。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州电子科技大学,未经杭州电子科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110474102.7/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top