[发明专利]光场图像空间域超分辨率方法、系统、终端及存储介质

权利要求书

1.一种光场图像空间域超分辨率方法，其特征在于，包括：

S11：将视点图像按照角度位置分为多组，对应设置多个视点图像对齐范围不同的对齐方案；

S12：将不同角度位置的视点图像，以其自身作为待超分辨率的中心视点图像，利用基于频域图像金字塔分解的视差提取方法，按照所述S11对应的对齐方案，对其周围预设对齐范围内的待对齐视点图像进行视差对齐，对齐至中心视点图像位置，得到一组对齐后的视点图像；

S13：将待训练的视点图像先剪裁为预设大小的图像块，后下采样，再按照所述S12进行对齐，然后输出至深度学习网络中进行训练，得到对应不同对齐方案的光场图像超分辨率模型；

S14：将待测试的视点图像按照所述S12进行对齐，将对齐后的视点图像输入到所述S13得到的对应其对齐方案的光场图像超分辨率模型中，预测得到空间域超分辨率后的视点图像；

所述S12具体包括：

将不同角度位置的视点图像，以其自身作为待超分辨率的中心视点图像，按照所述S11对应的对齐方案，对其周围预设对齐范围内四个方向的视点图像进行视差对齐，预设对齐范围内如有超过边界的缺失视点图像，将其用全零矩阵进行补齐；

其中，所述四个方向分别为0°、45°、90°、135°；

所述视差对齐具体包括：采用基于频域图像金字塔分解的视差提取方法，以参考视点图像为1相位，以待对齐视点图像为0相位，计算所述参考视点图像与所述待对齐视点图像之间的相位差，并以此相位差作为视差信息，将该相位差叠加至所述待对齐视点图像的原始相位上。

2.根据权利要求1所述的光场图像空间域超分辨率方法，其特征在于，所述S11具体包括：将7×7的光场视点图像按照角度位置分为6组，对应设置了6个视点图像对齐方案；

其中，所述6个视点图像对齐方案的对齐范围包括：3×3，5×5、7×7。

3.根据权利要求1所述的光场图像空间域超分辨率方法，其特征在于，所述S13具体包括：

S131：将待训练的高分辨率视点图像裁剪为相同尺寸的待训练的高分辨率视点图像的图像块；

S132：通过双三次插值法将所述S131得到的待训练的高分辨率视点图像的图像块下采样为待训练的低分辨率的视点图像的图像块；

S133：将所述S132得到的待训练的低分辨率的视点图像的图像块按照所述S12进行对齐，得到一组对齐后的待训练的低分辨率的视点图像块；

S134：将所述S133得到的一组对齐后的待训练的低分辨率的视点图像块以及未下采样的待训练的高分辨率的中心视点图像的图像块输入到深度学习网络中进行训练，得到对应6个不同对齐方案的光场图像超分辨率模型。

4.根据权利要求1所述的光场图像空间域超分辨率方法，其特征在于，所述S14具体包括：

S141：将待测试的高分辨率的视点图像下采样为待测试的低分辨率的视点图像；

S142：将所述S141得到的待测试的低分辨率的视点图像按照所述S12进行对齐，得到一组对齐后的待测试的低分辨率的视点图像；

S143：将所述S142得到的一组对齐后的待测试的低分辨率的视点图像输入到所述S13得到的对应其对齐方案的光场图像超分辨率模型中，预测得到空间域超分辨率后的视点图像。