[发明专利]用于生成超分辨图像的方法、装置和计算机程序产品

说明书

技术领域

各种实施方式一般性地涉及用于生成超分辨图像的方法、装置和计算机程序产品。

背景技术

各种电子设备，诸如摄像机、移动电话和其他设备广泛用于采集场景的图像。在传统的摄像机中，图像分辨率与摄像机中存在的传感器的分辨率相同，所以为了采集具有高分辨率的图像，需要对应数量的传感器。存在其他的摄像机，诸如光场摄像机，其能够在单次点击操作中采集场景的多个视图。甚至在采集图像后，这些摄像机允许稍后聚焦于图像中的对象。然而，这些摄像机具有所采集的图像的低分辨率的限制，因为用来记录图像细节的传感器在多个图像中被共享。在各种示例性的情景中，由光场摄像机采集的图像的分辨率通过对所采集的图像的“超分辨率”技术来提高。

发明内容

示例实施例的各个方面在权利要求书中进行阐述。

在第一方面中，提供了一种方法，包括：促进对光场图像的接收；确定该光场图像中的一个或多个深度级别；从该光场图像生成多个图像；确定该多个图像中的一个图像与一个或多个剩余图像之间的、对应于一个或多个深度级别的一个或多个配准矩阵；以及基于该一个或多个配准矩阵，来执行该图像和该一个或多个剩余图像的超分辨率，以生成该图像的超分辨图像。

在第二方面中，提供了一种装置，包括至少一个处理器；以及包括计算机程序代码的至少一个存储器，该至少一个存储器和该计算机 程序代码被配置为：与该至少一个处理器一起，促使该装置执行至少以下步骤：促进对光场图像的接收；确定该光场图像中的一个或多个深度级别；从该光场图像生成多个图像；确定该多个图像中的一个图像与一个或多个剩余图像之间的、对应于一个或多个深度级别的一个或多个配准矩阵；以及基于该一个或多个配准矩阵，来执行该图像和该一个或多个剩余图像的超分辨率，以生成该图像的超分辨图像。

在第三方面中，提供了一种计算机程序产品，包括至少一个计算机可读存储介质，该计算机可读存储介质包括一组指令，当该组指令由一个或多个处理器执行时，该组指令促使一个装置执行至少以下步骤：促进对光场图像的接收；确定该光场图像中的一个或多个深度级别；从该光场图像生成多个图像；确定该多个图像中的一个图像与一个或多个剩余图像之间的、对应于一个或多个深度级别的一个或多个配准矩阵；以及基于该一个或多个配准矩阵，来执行该图像和该一个或多个剩余图像的超分辨率，以生成该图像的超分辨图像。

在第四方面中，提供了一种设备，包括：用于促进对光场图像的接收的装置；用于确定该光场图像中的一个或多个深度级别的装置；用于从该光场图像生成多个图像的装置；用于确定该多个图像中的一个图像与一个或多个剩余图像之间的、对应于一个或多个深度级别的一个或多个配准矩阵的装置；以及用于基于该一个或多个配准矩阵、来执行该图像和该一个或多个剩余图像的超分辨率、以生成该图像的超分辨图像的装置。

在第五方面中，提供了一种计算机程序，包括程序指令，当这些程序指令由一个装置执行时，这些程序指令促使该装置：促进对光场图像的接收；确定该光场图像中的一个或多个深度级别；从该光场图像生成多个图像；确定该多个图像中的一个图像与一个或多个剩余图像之间的、对应于一个或多个深度级别的一个或多个配准矩阵；以及基于该一个或多个配准矩阵，来执行该图像和该一个或多个剩余图像的超分辨率，以生成该图像的超分辨图像。

附图说明

通过示例的方式，并且不通过限制的方式，在附图中的图中图示了各个实施例，在附图中：

图1根据一个示例实施例，图示了一种设备；

图2根据一个示例实施例，图示了用于生成超分辨图像的装置；

图3根据一个示例实施例，表示了一个光场图像；

图4根据一个示例实施例，图示了在该光场图像中表示深度级别的深度图的示例表示；

图5A、5B和5C根据一个示例实施例，图示了从该光场图像所生成的多个图像的示例表示；

图6根据一个示例实施例，图示了超分辨图像的示例表示；

图7根据一个示例实施例是一个流程图，该流程图描述了用于生成超分辨图像的示例方法；以及

图8根据另一个示例实施例是一个流程图，该流程图描述了用于生成超分辨图像的示例方法。

具体实施方式

通过参考附图中的图1至8来理解示例实施例以及它们的潜在效果。