[发明专利]用于恢复图像的方法和设备

权利要求书

1.一种图像恢复方法，包括：

通过重新布置对象的输入图像来获取目标图像；以及

基于包括与多个内核对应的卷积层的图像恢复模型，从获取的目标图像恢复输出图像，其中，所述多个内核分别对应于多个扩张间隙，

其中，所述多个扩张间隙基于透镜和包括在图像传感器中的多个感测元件的配置来确定。

2.根据权利要求1所述的图像恢复方法，其中，所述多个内核中的内核基于包括在图像传感器中的所述多个感测元件之间的位置关系来确定，所述多个感测元件被配置为接收从与图像传感器分隔开大于阈值距离的距离的对象的点发射的光线。

3.根据权利要求1所述的图像恢复方法，其中，所述图像恢复模型包括与所述多个内核中的内核对应的卷积层，其中，内核基于包括在图像传感器中的多个感测元件之间的位置关系来确定，所述多个感测元件被配置为接收从与图像传感器分隔开最小捕获距离的点发射的光线。

4.根据权利要求3所述的图像恢复方法，其中，对应于最小捕获距离的内核具有对应于最大视差的扩张间隙，

其中，最大视差基于图像传感器的最小捕获距离、图像传感器的中心透镜与图像传感器的最外侧透镜之间的距离、以及透镜的焦距来确定。

5.根据权利要求1所述的图像恢复方法，其中，所述图像恢复模型还包括分别与多个层级对应的多个卷积层。

6.根据权利要求1所述的图像恢复方法，其中，所述图像恢复模型还包括与具有不同的扩张间隙的所述多个内核分别对应的多个卷积层。

7.根据权利要求1所述的图像恢复方法，其中，恢复输出图像的步骤包括：

基于卷积层从目标图像提取特征数据；以及

基于包括在所述图像恢复模型中的除了所述卷积层之外的层从特征数据生成输出图像。

8.根据权利要求1所述的图像恢复方法，其中，所述图像恢复模型还包括与具有相同扩张间隙的所述多个内核对应的多个卷积层。

9.根据权利要求1所述的图像恢复方法，其中，恢复输出图像的步骤包括：基于所述图像恢复模型从目标图像恢复输出图像，其中，所述图像恢复模型被训练为响应于通过重新布置复眼视觉图像获得的参考输入图像的输入而输出参考输出图像。

10.根据权利要求1所述的图像恢复方法，其中，获取目标图像的步骤包括：

获取复眼视觉图像；以及

通过重新布置复眼视觉图像生成目标图像。

11.根据权利要求10所述的图像恢复方法，其中，获取复眼视觉图像的步骤包括：基于通过以阵列设置的多个透镜由所述多个感测元件接收的光线的强度来获取复眼视觉图像。

12.根据权利要求11所述的图像恢复方法，其中，所述多个透镜相对于所述多个感测元件偏心地布置。

13.根据权利要求11所述的图像恢复方法，其中，生成目标图像的步骤包括：基于由所述多个感测元件感测的光场信息重新布置复眼视觉图像。

14.根据权利要求13所述的图像恢复方法，其中，重新布置复眼视觉图像的步骤包括：重新布置复眼视觉图像的像素，使得所述多个感测元件之中的感测相似的光场信息的感测元件的像素彼此相邻。

15.根据权利要求13所述的图像恢复方法，其中，重新布置复眼视觉图像的像素的步骤包括：

基于所述多个感测元件之间的位置关系以及从与图像传感器分隔开大于阈值距离的距离的对象的点发射的光线，来确定发出由所述多个感测元件中的每个感测的光场的对象的点；以及

重新布置与从彼此相邻的点发出的光场信息对应的像素，使得重新布置的像素彼此相邻。