[发明专利]基于Bicubic下采样图像空间对齐的盲图像超分辨率重建方法在审
申请号: | 202310539101.5 | 申请日: | 2023-05-15 |
公开(公告)号: | CN116563110A | 公开(公告)日: | 2023-08-08 |
发明(设计)人: | 曾坤;李佐勇;滕升华;张书豪;赵婷婷 | 申请(专利权)人: | 闽江学院 |
主分类号: | G06T3/40 | 分类号: | G06T3/40;G06N3/0464;G06N3/08 |
代理公司: | 福州元创专利商标代理有限公司 35100 | 代理人: | 丘鸿超;蔡学俊 |
地址: | 350108 福建省*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 bicubic 采样 图像 空间 对齐 分辨率 重建 方法 | ||
1.一种基于Bicubic下采样图像空间对齐的盲图像超分辨率重建方法,其特征在于:盲图像超分辨率重建网络由三个子网络组成,即:核估计子网络KNet、Bicubic下采样图像空间对齐子网络BNet和图像重建子网络SRNet;通过将估计核信息输入到Bicubic下采样图像空间对齐子网络中,使盲低分辨率图像先映射到Bicubic下采样图像空间中,以获得Bicubic下采样LR图像,所述图像重建子网络SRNet采用非盲超分辨率重建网络;
将低分辨率图像ILR输入到所述盲图像超分辨率重建网络,输出重建的高分辨率图像ISR。
2.根据权利要求1所述的基于Bicubic下采样图像空间对齐的盲图像超分辨率重建方法,其特征在于:所述盲图像超分辨率重建网络首先通过核估计子网络KNet精准地估测出模糊核的信息,然后Bicubic下采样图像空间对齐子网络BNet在模糊核的指导下将LR图像域映射到Bicubic下采样图像空间,最后图像重建子网络SRNet使用BNet生成的Bicubic下采样LR图像重建出高分辨率图像。
3.根据权利要求1所述的基于Bicubic下采样图像空间对齐的盲图像超分辨率重建方法,其特征在于:使用ResNet作为核估计子网络KNet;所述Bicubic下采样图像空间对齐子网络BNet使用密集残差网络RRDB与空间特征转换SFT将不同降质过程产生的低分辨率图像映射为Bicubic下采样LR图像。
4.根据权利要求1所述的基于Bicubic下采样图像空间对齐的盲图像超分辨率重建方法,其特征在于:所述核估计子网络KNet采用ResNet作为核估计网络,通过多个深度残差模块进行图像的特征抽取,多次运用跳跃将输入连接到网络输出:首先通过一个3×3的卷积层提取浅层特征,然后送入多个残差块中提取深层特征,同时利用跳跃连接加速模型的训练和提高模型的准确性,最后通过两个卷积层、平均池化以及Softmax将主体的输出特征图转换为模糊核矩阵。
5.根据权利要求1所述的基于Bicubic下采样图像空间对齐的盲图像超分辨率重建方法,其特征在于:所述Bicubic下采样图像空间对齐子网络BNet由两个卷积层和两个RRDB-SFT组成;其中,第一层3×3的卷积用于提取LR图像的浅层特征,然后通过RRDB-SFT进一步利用浅层特征;SFT层除了接收上一层的浅层特征外,还将估计的模糊核K作为输入。
6.根据权利要求1所述的基于Bicubic下采样图像空间对齐的盲图像超分辨率重建方法,其特征在于:所述图像重建子网络SRNet允许采用任意非盲超分辨率网络。
7.根据权利要求1所述的基于Bicubic下采样图像空间对齐的盲图像超分辨率重建方法,其特征在于:所述盲图像超分辨率重建网络通过将不同降质过程产生的盲LR图像转换到Bicubic下采样图像空间域,然后利用训练好的图像重建子网络SRNet进行重建使得网络对模糊核估计所产生的误差具有一定的包容度,以重建出更加清晰的高分辨率图像。
8.根据权利要求1所述的基于Bicubic下采样图像空间对齐的盲图像超分辨率重建方法,其特征在于:
所述超分辨率重建网络的训练过程分为三个阶段:
第一阶段对三个子网络进行预训练;其中,对核估计子网络KNet使用真实核进行监督来对输入的LR图像预测模糊核;所述Bicubic下采样图像空间对齐子网络BNet是一个有监督的网络,使用真实的LR图像、真实的模糊核和对应的Bicubic下采样LR图像进行训练;图像重建子网络SRNet也是一个有监督的网络,使用HR图像和对应的Bicubic下采样LR图像进行训练;
第二阶段使用核估计子网络KNet生成的估计核对Bicubic下采样图像空间对齐子网络BNet进行微调,并将LR映射为Bicubic下采样图像;
第三阶段使用估计的B图像微调SRNet网络,并获得最终的SR结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于闽江学院,未经闽江学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310539101.5/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序