[发明专利]一种基于增强型生成对抗网络的图像超分辨率方法在审
申请号: | 202210593247.3 | 申请日: | 2022-05-27 |
公开(公告)号: | CN115018705A | 公开(公告)日: | 2022-09-06 |
发明(设计)人: | 付煜波;杨欣;朱义天;李恒锐;周大可 | 申请(专利权)人: | 南京航空航天大学 |
主分类号: | G06T3/40 | 分类号: | G06T3/40;G06N3/04;G06N3/08 |
代理公司: | 南京瑞弘专利商标事务所(普通合伙) 32249 | 代理人: | 吴旭 |
地址: | 210016 江*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 增强 生成 对抗 网络 图像 分辨率 方法 | ||
1.一种基于增强型生成对抗网络的图像超分辨率方法,其特征在于,包括以下步骤:
1)基于RRDB嵌套残差密集结构,利用并行卷积PC实现多尺度特征提取,加入CBAM注意力机制模块提高对高频信息的学习能力,构建并行卷积密集连接残差块RR-PADB;
2)构建超分辨率网络模型,所述模型包括生成网络和判别网络,其中在生成网络中加入步骤1)中构建的并行卷积密集连接残差块RR-PADB;
3)在步骤2)中的生成网络中输入低分辨率图像,输出假的高分辨率图像,将假的高分辨率图像以及原始的低分辨率图像输入所述判别网络中,由判别网络对假的高分辨率图像进行评判,若判别为假则生成网络继续训练;若判别为真则生成网络停止训练,此时生成网络即为改进的超分辨率模型;
4)通过步骤3)中改进的超分辨率模型对图像进行处理。
2.如权利要求1所述的一种基于增强型生成对抗网络的图像超分辨率方法,其特征在于,步骤1)中构建并行卷积密集连接残差块RR-PADB的实现过程为:
并行卷积PC表达式为:
Po=f3*3(Pi)+f5*5(Pi)
其中:Po为并行卷积层的输出,Pi为并行卷积层输入,f3*3表示一个3*3卷积计算,f5*5表示5*5卷积计算;
将并行卷积PC利用密集连接并加入注意力机制形成并行密集连接PADB:
并行卷积PC第一层输出F1为:
F1=f3*3(Fi)+f5*5(Fi)
Fi表示第1层的输入,Fn(n=1,2,3)表示第n层并行卷积后的结果,则有:
F2=f3*3[Ca(F1,F0,)]+f5*5[Ca(F1,F0,)])
F3=f3*3[Ca(F2,F1,F0,)]+f5*5[Ca(F2,F1,F0,)])
其中:Ca表示特征拼接操作;
经过密集连接后再经过一次3*3卷积提取特征:
F=f3*3(F3)
其中F为经过特征提取得到的特征图;
将特征图F再与CBAM注意力机制模块结合,CBAM注意力机制模块为先进行一次通道注意力再进行一次空间注意力:
首先进行一次通道注意力运算F′=MC(F)⊙F
再进行一次空间注意力运算F″=MS(F′)⊙F′
其中F″为经过CBAM注意力机制的运算结果,F′为经过通道注意力的运算结果,MC(F)表示通道注意力得到的权重结果,⊙表示对应值相乘,MS(F′)表示空间注意力得到的权重结果;
最终并行卷积密集连接块的结果表示为:
F″=MS(F′)⊙(MC(F)⊙{f3*3[Ca(F3,F2,F1,Fi)]})
并行卷积密集连接残差块RR-PADB表示为:
R1=β[D(Ri)]+Ri
R2=β[D(R1)]+R1
R3=β[D(R2)]+R2
RO=β[D(R3)]+Ri
其中:Ri表示RR-PADB的输入,Rn(n=1,2,3)表示经过n层RR-PADB的输出,RO表示RR-PADB的输出,D表示并行卷积密集连接运算,β为参数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京航空航天大学,未经南京航空航天大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210593247.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:汽车前副车架检具
- 下一篇:一种小样本类不平衡的轴承智能故障诊断方法