[发明专利]基于残差通道注意力机制的双流遥感图像融合方法在审
申请号: | 202111156702.5 | 申请日: | 2021-09-30 |
公开(公告)号: | CN113920043A | 公开(公告)日: | 2022-01-11 |
发明(设计)人: | 黄梦醒;刘适;毋媛媛;冯思玲;冯文龙;张雨;吴迪;黎贞凤;贺陈耔都 | 申请(专利权)人: | 海南大学 |
主分类号: | G06T5/50 | 分类号: | G06T5/50;G06N3/04;G06N3/08 |
代理公司: | 海南汉普知识产权代理有限公司 46003 | 代理人: | 麦海玲 |
地址: | 570100 海*** | 国省代码: | 海南;46 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 通道 注意力 机制 双流 遥感 图像 融合 方法 | ||
1.基于残差通道注意力机制的双流遥感图像融合方法,其特征在于,包括以下步骤:
步骤S1、使用卷积神经网络对全色图像和低分辨率多光谱遥感图像进行特征提取,并将两者进行拼接获得拼接特征;
步骤S2、构建残差注意力网络,所述残差注意力网络包括残差注意力模块,所述残差注意力模块中包含通道注意力机制;
步骤S3、将拼接特征输入到残差注意力网络中进行卷积处理,获得初始特征,残差注意力模块根据通道注意力机制对初始特征进行加权分配处理,获得新特征,根据新特征获得强化特征;
步骤S4、将强化特征经过反卷积层放大尺寸,然后再通过一个卷积层重构放大后的特征后,获得高分辨率的多光谱遥感图像。
2.根据权利要求1所述的基于残差通道注意力机制的双流遥感图像融合方法,其特征在于,所述步骤S1在对全色图像进行特征提取前,对全色图像进行下采样以适应低分辨率的多光谱遥感图像的尺寸。
3.根据权利要求1所述的基于残差通道注意力机制的双流遥感图像融合方法,其特征在于,所述步骤S2的的残差注意力网络还包括残差注意力群,所述残差注意力群包括若干块、长残差连接以及短残差连接,所述短残差连接将剩余块堆叠起来,所述长残差连接和短残差连接允许浅层信息直接通过恒等映射向后传播。
4.根据权利要求1所述的基于残差通道注意力机制的双流遥感图像融合方法,其特征在于,所述步骤S3的具体步骤包括:
步骤S31、将拼接特征Fb-1输入到残差注意力网络中,经过两次卷积后获得初始特征X;
步骤S32、将初始特征X输入到残差注意力模块中,由通道注意力机制获得新特征根据新特征与拼接特征Fb-1获得强化特征Fb。
5.根据权利要求4所述的基于残差通道注意力机制的双流遥感图像融合方法,其特征在于,所述步骤S31的具体表达式为:
其中Xb-1为拼接特征Fb-1进行第一次卷积后得到的输出,Xb为经过第二次卷积后得到的输出,初始特征X为Xb的其中一个,W1和W2分别为第一层和第二层卷积层的权重,b1和b2表示第一层和第二层卷积层的偏置,3×3代表卷积核的大小,δ(·)表示ReLU激活函数。
6.根据权利要求5所述的基于残差通道注意力机制的双流遥感图像融合方法,其特征在于,所述步骤S32的具体表达式为:
Fb=CA(Xb)+Fb-1;
其中CA(·)表示通道注意力机制函数,新特征
7.根据权利要求1所述的基于残差通道注意力机制的双流遥感图像融合方法,其特征在于,所述步骤S3中残差注意力模块根据通道注意力机制对初始特征进行加权分配处理并获得强化特征的具体步骤为:
步骤S33、获取通道数量C,对输入的初始特征X进行全局平均池化,并获得通道描述z;
步骤S34、将通道描述z依次经过下采样层和上采样层后,得到通道统计量w,通道统计量w内包含有每一个通道的权重系数wc;
步骤S35、将权重系数wc和初始特征X相乘,获得新特征
8.根据权利要求7所述的基于残差通道注意力机制的双流遥感图像融合方法,其特征在于,所述步骤S33中,通道数量C=(1,2,...,c),初始特征X=[X1,X2,...Xc],第c个通道的通道描述zc的具体表达式为:
其中fGP(·)为全局平均池化函数,H,W为特征图的尺寸,xc(i,j)为第c层特征xc在(i,j)处的值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于海南大学,未经海南大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111156702.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:基于风能的锅炉烟气处理系统及方法
- 下一篇:车辆行驶预警方法、装置及存储介质