[发明专利]基于条件生成对抗网络的水下图像增强方法及系统在审
申请号: | 202211179797.7 | 申请日: | 2022-09-27 |
公开(公告)号: | CN115565056A | 公开(公告)日: | 2023-01-03 |
发明(设计)人: | 李振波;李一鸣;李飞 | 申请(专利权)人: | 中国农业大学 |
主分类号: | G06V20/05 | 分类号: | G06V20/05;G06V10/30;G06V10/32;G06V10/42;G06V10/44;G06V10/80;G06V10/82;G06N3/04;G06N3/08 |
代理公司: | 北京众合诚成知识产权代理有限公司 11246 | 代理人: | 张文宝 |
地址: | 100193 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 条件 生成 对抗 网络 水下 图像 增强 方法 系统 | ||
1.一种基于条件生成对抗网络的水下图像增强方法,包括如下步骤:
步骤1:获取水下退化图像和对应的纯净图像的成对图像集,并分为训练集和测试集;
步骤2:将所有图像缩放为大小相同的尺寸;
步骤3:模型构建,包括:基于编解码器结构对图像进行全局和局部特征提取;将全局特征分别与各尺度的局部特征进行融合;将全局特征经过逐层上采样进行图像还原,每个上采样层与对应尺度的融合特征进行连接;将生成的图像送入判别器网络,判断其是否来自于真实数据,促使生成器网络进行调整;
步骤4:模型训练和测试,保存测试好的模型;
步骤5:利用测试好的模型对实际水下图像进行处理。
2.根据权利要求1所述的一种基于条件生成对抗网络的水下图像增强方法,其特征在于,所述编解码器结构为改进的U-Net网络,其包括8层降采样,并通过逐层卷积的方式对输入图像进行全局和局部特征提取。
3.根据权利要求2所述的一种基于条件生成对抗网络的水下图像增强方法,其特征在于,所述降采样层的每一个由LeakyRelu层、二维卷积层和批归一化层组成。
4.根据权利要求2所述的一种基于条件生成对抗网络的水下图像增强方法,其特征在于,在降采样过程中基于SENet与NAM模块,将SENet中的全局平均池化模块更换为NAM模块中的批归一化比例因子,构建用于水下图像增强的注意力模块。
5.根据权利要求4所述的一种基于条件生成对抗网络的水下图像增强方法,其特征在于,在所述注意力模块中,输入的特征图经过批归一化层和1×1卷积处理,并与权重系数相乘,再经过ReLU激活函数、1×1卷积层和sigmoid激活函数,最终与输入特征图进行跳层连接。
6.根据权利要求2所述的一种基于条件生成对抗网络的水下图像增强方法,其特征在于,在逐层上采样的结果与具备相同分辨率的降采样结果进行跳层连接之前进行全局和局部特征融合,融合过程为:
步骤4-1:通过卷积核大小为1×1、步长为1的卷积层将全局特征fg的通道数量cg调整为与对应尺度i的局部特征图fl相同的通道数ci,该步骤表示为
fg1=Fconv(fg,W)
其中,Fconv表示卷积操作,W为可学习权重;
步骤4-2:对fg1进行复制,复制数量为hi×wi,其中,hi与wi为尺度i的局部特征图fl的长度和宽度,该操作表示为
fg2=Fcopy(fg1,num=hi×wi)
步骤4-3:将fg2重塑为与fl相同的维度hi×wi×ci
fg3=Fre(fg2,size=hi×wi×ci)
其中,Fre表示重塑操作。
步骤4-4:将fg3与fl进行连接操作
fout=Fconcat(fl,fg3)。
7.根据权利要求2所述的一种基于条件生成对抗网络的水下图像增强方法,其特征在于,基于改进的U-Net网络进行图像还原,其包括8层上采样,并与降采样层对应。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国农业大学,未经中国农业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211179797.7/1.html,转载请声明来源钻瓜专利网。