[发明专利]一种基于通道注意力的Swin-Transformer图像去噪方法及系统有效
申请号: | 202111414625.9 | 申请日: | 2021-11-25 |
公开(公告)号: | CN114140353B | 公开(公告)日: | 2023-04-07 |
发明(设计)人: | 张莉;代强;赵雷;王邦军 | 申请(专利权)人: | 苏州大学 |
主分类号: | G06T5/00 | 分类号: | G06T5/00;G06T3/40;G06V10/40;G06V10/774;G06V10/80;G06V10/82;G06N3/0464;G06N3/08 |
代理公司: | 苏州市中南伟业知识产权代理事务所(普通合伙) 32257 | 代理人: | 张荣 |
地址: | 215000 江苏*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 通道 注意力 swin transformer 图像 方法 系统 | ||
1.一种基于通道注意力的Swin-Transformer图像去噪方法,其特征在于,包括如下步骤:
步骤S1:获取原始高清图片数据集,对原始高清图片数据集进行预处理,得到用于去噪网络模型训练的有噪图像和高清图像的训练数据集;
步骤S2:将有噪图像输入至去噪网络模型中的浅层特征提取网络中提取特征信息,得到浅层特征图;
步骤S3:将所述浅层特征图作为去噪网络模型中的深层特征提取网络的输入,进行特征提取后得到深层特征图,所述深层特征提取网络包括多个CARSTB模块和一个卷积层,其中,CARSTB模块包括一个残差块和若干个通道注意力Swin-Transformer层,通道注意力Swin-Transformer层通过在Swin-Transformer层中的每个MSA和MLP模块中分别加入通道注意力模块而得到;CARSTB模块对浅层特征图进行特征信息的提取并对提取的信息进行重要性区分后,通过卷积层后得到深层特征图;其中,所述通道注意力模块形成的方法为:浅层特征图在经过一个卷积层后得到特征图,特征图被压缩到全局池化层中,之后第一1x1卷积层将特征图通道数压缩到浅层特征图的1/16,第二1x1卷积层将特征图通道数扩增到浅层特征图的通道数相同,所述第一1x1卷积层和第二1x1卷积层中包括ReLU的激活层;最后,使用Sigmoid激活函数对特征图进行规范化并产生输出,并将产生的输出和浅层特征图进行加权;
步骤S4:将浅层特征图和深层特征图进行特征融合,得到重建图像;
步骤S5:利用损失函数约束重建图像与高清图像之间的差异,不断调整去噪网络模型的参数,直到去噪网络模型收敛,完成去噪网络模型的训练。
2.根据权利要求1所述的一种基于通道注意力的Swin-Transformer图像去噪方法,其特征在于,步骤S1中,所述对原始高清图片数据集进行预处理,得到用于去噪网络模型训练的有噪图像和高清图像的训练数据集的方法为:对原始高清图片添加高斯噪声,生成有噪图像和高清图像,将所有图像从RGB颜色空间转换到YCbCr颜色空间,仅保留图像YCbCr中的Y通道,并进一步对图像进行包括旋转、翻转、缩小的操作进行数据扩充。
3.根据权利要求2所述的一种基于通道注意力的Swin-Transformer图像去噪方法,其特征在于,采用双三次插值法对数据集中的图像缩小为原来的0.5和0.7倍。
4.根据权利要求1所述的一种基于通道注意力的Swin-Transformer图像去噪方法,其特征在于,步骤S2中,所述将有噪图像输入至去噪网络模型中的浅层特征提取网络中提取特征信息,得到浅层特征图的方法为:将有噪图像输入至一个3x3深度卷积层,得到浅层特征图。
5.根据权利要求1所述的一种基于通道注意力的Swin-Transformer图像去噪方法,其特征在于,步骤S3中,所述深层特征提取网络中的一个卷积层为3x3卷积层。
6.根据权利要求1所述的一种基于通道注意力的Swin-Transformer图像去噪方法,其特征在于,步骤S5中,所述损失函数为:
其中表示重建图像I中的第i行第j列的像素值,I(i,j)表示高清图像I中的第i行第j列的像素值,M和N分别表示图像的宽度和高度,B代表输入数据集的批次大小,ε是Charbonnier惩罚系数。
7.根据权利要求1所述的一种基于通道注意力的Swin-Transformer图像去噪方法,其特征在于,步骤S5后,还包括:对测试集中的有噪图像与对应的重建图像进行峰值信噪比指标的评估。
8.根据权利要求7所述的一种基于通道注意力的Swin-Transformer图像去噪方法,其特征在于,所述峰值信噪比指标的评估公式为:
其中MSE表示均方误差,n代表图像的色彩深度。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州大学,未经苏州大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111414625.9/1.html,转载请声明来源钻瓜专利网。