[发明专利]图像恢复方法和图像恢复设备

权利要求书

1.一种图像恢复方法，包括：

获取多条输入图像信息；

从所述多条输入图像信息中的每条输入图像信息生成与多个视差对应的多条扭曲图像信息；和

使用图像恢复模型，基于所述多条输入图像信息和所述多条扭曲图像信息来生成输出图像。

2.根据权利要求1所述的图像恢复方法，其中，获取所述多条输入图像信息的步骤包括：获取使用位于不同位置的透镜捕获的多个输入图像作为所述多条输入图像信息。

3.根据权利要求2所述的图像恢复方法，其中，生成所述多条扭曲图像信息的步骤包括：通过基于与所述多个视差中的每个视差对应的深度将所述多个输入图像中的每个输入图像扭曲到与目标图像对应的像素坐标系，来生成扭曲图像作为扭曲图像信息。

4.根据权利要求3所述的图像恢复方法，其中，生成扭曲图像的步骤包括：通过基于与所述多个视差中的一个视差对应的单个深度将所述多个输入图像中的每个输入图像中的所有像素扭曲到与目标图像对应的像素坐标系，来生成多个扭曲图像中的一个扭曲图像。

5.根据权利要求3所述的图像恢复方法，其中，与所述多个视差中的一个视差对应的深度与针对输入图像相对于目标图像设置的视差以及捕获目标图像和输入图像的感测单元之间的间隙相关联。

6.根据权利要求3所述的图像恢复方法，其中，生成输出图像的步骤包括：通过提供通过将所述多个输入图像和所述多个扭曲图像串联而获得的数据作为图像恢复模型的输入来生成输出图像。

7.根据权利要求1所述的图像恢复方法，其中，获取所述多条输入图像信息的步骤包括：使用特征提取模型，从所述多个输入图像提取多个输入特征图作为所述多条输入图像信息。

8.根据权利要求7所述的图像恢复方法，其中，生成所述多条扭曲图像信息的步骤包括：通过基于与所述多个视差中的每个视差对应的深度将所述多个输入特征图中的每个输入特征图扭曲到与目标图像对应的像素坐标系，来生成扭曲特征图作为扭曲图像信息。

9.根据权利要求8所述的图像恢复方法，其中，生成输出图像的步骤包括：通过提供通过将所述多个输入特征图和多个扭曲特征图串联而获得的数据作为图像恢复模型的输入来生成输出图像。

10.根据权利要求1至权利要求9中任意一项所述的图像恢复方法，其中，图像恢复模型是包括将卷积滤波应用于输入数据的至少一个卷积层的神经网络。

11.根据权利要求1至权利要求9中任意一项所述的图像恢复方法，其中，

所述多个视差小于或等于最大视差并大于或等于最小视差，并且

最大视差与感测单元的最小捕获距离、感测单元之间的间隙以及感测单元的焦距相关联。

12.根据权利要求11所述的图像恢复方法，其中，有限数量的视差被提供。

13.根据权利要求1至权利要求9中任意一项所述的图像恢复方法，其中，生成输出图像的步骤包括：通过跳过与单独的像素对应的目标点的深度感测来生成输出图像。

14.根据权利要求1至权利要求9中任意一项所述的图像恢复方法，其中，生成所述多条扭曲图像信息的步骤包括：

针对目标感测单元和捕获所述多个输入图像之中的一个输入图像的感测单元加载预先计算的坐标映射函数；和

通过将加载的坐标映射函数应用于输入图像来生成扭曲图像信息。

15.根据权利要求1至权利要求9中任意一项所述的图像恢复方法，其中，输出图像的分辨率高于所述多个输入图像中的每个输入图像的分辨率。