[发明专利]图像处理设备和图像处理方法

说明书

本公开内容涉及被设计成使得可以根据虚拟视点的快速移动来改变高精度图像的图像处理装置和图像处理方法。位置校正单元校正多个点中的遮挡区域的边界的点的三维位置，该三维位置被包括在包括多个点的颜色信息和三维位置的三维数据中，并且该三维数据是根据来自规定的观察点的彩色图像数据和深度图像数据生成的。本公开内容可以应用于例如用于根据来自规定的观察点的彩色图像数据和深度图像数据生成虚拟观察点的彩色图像数据的图像处理装置等。

技术领域

本公开内容涉及图像处理设备和图像处理方法，并且具体地涉及可以追踪虚拟视点的快速移动以改变高精度图像的图像处理设备和图像处理方法。

背景技术

从很久以前就研究了基于来自预定视点的拍摄图像生成来自任意虚拟视点的图像的技术。在该技术中需要对遮挡区域采取对策。

更具体地，图像是三维空间到二维空间的投影，并且在图像中背景中的对象被前景中的对象隐藏。因此，在虚拟视点与成像期间的视点不同的情况下，生成遮挡区域，该遮挡区域是被拍摄图像中的前景中的对象隐藏但不在来自虚拟视点的图像中隐藏的背景中的对象的区域。所拍摄的图像中不存在遮挡区域的图像，并且需要新生成该图像。

生成遮挡区域的图像的方法的示例包括通过使用来自与预定视点不同的视点的拍摄图像生成来自预定虚拟视点的遮挡区域的图像的方法(例如参见专利文献1)。

引用列表

[专利文献]

[专利文献1]JP 2006-285415A

发明内容

[技术问题]

然而，在生成遮挡区域的图像的常规方法中，需要针对每个虚拟视点生成遮挡区域的图像，并且在确定了虚拟视点之后生成遮挡区域的图像。因此，例如在与显示在头戴式显示器上的图像对应的虚拟视点的快速移动伴随戴着头戴式显示器的头部的移动的情况下，可能无法及时生成遮挡区域的图像，并且可能无法显示来自改变的虚拟视点的图像。

鉴于这样的情况做出了本公开内容，并且本公开内容使得能够追踪虚拟视点的快速移动以改变高精度图像。

[问题的解决方案]

本公开内容的一方面提供了一种包括位置校正单元的图像处理设备，该位置校正单元校正多个点中的遮挡区域的边界的点的三维位置，该三维位置被包括在包括多个点的三维位置和颜色信息的三维数据中，该三维数据是根据来自预定视点的彩色图像数据和深度图像数据生成的。

本公开内容的该方面提供了一种与根据本公开内容的该方面的图像处理设备对应的图像处理方法。

在本公开内容的该方面中，校正多个点中的遮挡区域的边界的点的三维位置。三维位置被包括在包括多个点的三维位置和颜色信息的三维数据中，并且三维数据是根据来自预定视点的彩色图像数据和深度图像数据生成的。

注意，根据本公开内容的该方面的图像处理设备可以通过使计算机执行程序来实现。

另外，要通过计算机执行以实现根据本公开内容的该方面的图像处理设备的程序可以通过经由传输介质传送程序或通过将程序记录在记录介质中来提供。

[发明的有益效果]

根据本公开内容的该方面，可以处理图像。此外，根据本公开内容的该方面，可以追踪虚拟视点的快速移动来改变高精度图像。

注意，这里描述的有利效果可以不受限制，并且有利效果可以是本公开内容中描述的任何有利效果。

附图说明

图1是示出根据本公开内容的图像处理设备的实施方式的配置示例的框图。

图2示出了输入图像数据的示例。