[发明专利]适应大视差范围的光场图像视角超分辨方法及装置在审
申请号: | 202110563268.6 | 申请日: | 2021-05-24 |
公开(公告)号: | CN113506213A | 公开(公告)日: | 2021-10-15 |
发明(设计)人: | 苏丽娟;袁艳;叶子沐 | 申请(专利权)人: | 北京航空航天大学 |
主分类号: | G06T3/40 | 分类号: | G06T3/40;G06N3/08 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 徐章伟 |
地址: | 100191*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 适应 视差 范围 图像 视角 分辨 方法 装置 | ||
1.一种适应大视差范围的光场图像视角超分辨方法,其特征在于,包括以下步骤:
S1,使用双线性插值方法,在光场图像的已有视角图像之间插入新增的视角图像,将视角分辨率提升至原来的n倍;
S2,从步骤S1中提取待修复的极平面图像,构成极平面图像立方体;
S3,构建基于多尺度卷积层的嵌套连接结构的适应大视差范围的光场图像视角超分辨网络;
S4,训练适应大视差范围的视角超分辨网络,使用训练好的网络模型修复极平面图像立方体的信息,获得优化的极平面图像立方体;
S5,将优化的极平面图像立方体重建为倍率为n的光场图像视角超分辨结果。
2.根据权利要求1所述的适应大视差范围的光场图像视角超分辨方法,其特征在于,步骤S3包括:
S301,构建极平面图像立方体预处理部分;
S302,构建极平面图像立方体结构学习部分;
S303,通过所述嵌套连接结构对极平面图像立方体进行特征提取与重建;
S304,将所述嵌套连接结构的输出结果输入连续的三个卷积层,得到输出极平面图像立方体。
3.根据权利要求2所述的适应大视差范围的光场图像视角超分辨方法,其特征在于,所述嵌套连接结构包括:特征提取模块、特征重建模块和特征链接模块。
4.根据权利要求3所述的适应大视差范围的光场图像视角超分辨方法,其特征在于,所述特征提取模块通过去除均值池化层的改进通道注意力机制的注意力残差块构成。
5.根据权利要求4所述的适应大视差范围的光场图像视角超分辨方法,其特征在于,所述特征重建模块的尺度和所述特征提取模块的尺度一一对应。
6.根据权利要求5所述的适应大视差范围的光场图像视角超分辨方法,其特征在于,所述特征链接模块由卷积层构成,所述特征链接模块的尺度和同层级的所述特征提取模块的尺度相同。
7.根据权利要求6所述的适应大视差范围的光场图像视角超分辨方法,其特征在于,在步骤S4中,通过Pytorch框架构建并训练所述网络模型。
8.根据权利要求7所述的适应大视差范围的光场图像视角超分辨方法,其特征在于,所述视角超分辨网络的输出数据通过损失函数进行处理,所述损失函数的表达式如下:
其中,P为训练数据量,为极平面图像立方体真值,为待修复的极平面图像立方体,ω代表网络权重信息,λ为权重衰减系数。
9.根据权利要求8所述的适应大视差范围的光场图像视角超分辨方法,其特征在于,在步骤S5中,对所述光场图像视角超分辨结果进行视觉效果评价和定量评价,其中,所述定量评价的指标包括PSNR和SSIM,公式如下:
其中,X,Y分别为失真图像和目标图像,uX,uY表示图像X和Y的均值,σX,σY,σXY表示图像X,Y的标准差和标准差,C1,C2,C3为常数。
10.一种适应大视差范围的光场图像视角超分辨装置,其特征在于,采用了根据权利要求1-9中任一项所述的适应大视差范围的光场图像视角超分辨方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京航空航天大学,未经北京航空航天大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110563268.6/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序