[发明专利]图像处理装置和图像处理方法

说明书

本公开涉及图像处理装置和图像处理方法，利用其可以使用全方向图像生成来自预定视点的高质量纹理图像。绘制单元使用以下图像生成来自预定视点的显示图像：第一层图像，其包括来自第一视点的全方向图像的纹理图像和深度图像；以及第二层图像，其包括来自与第一视点不同的第二视点的、第一层图像的视点处的遮挡区域的纹理图像和深度图像。本公开可以应用于例如根据全方向图像生成来自预定视点的显示图像的家庭服务器等。

技术领域

本公开涉及图像处理装置和图像处理方法，并且具体地涉及使得能够使用全方向图像生成预定视点处的高图片质量的纹理图像的图像处理装置和图像处理方法。

背景技术

可获得下述存储装置：该存储装置用于生成全方向图像并且编码和存储所生成的全方向图像，在该全方向图像中，利用多个相机成像的水平方向上周围360度上和垂直方向上周围180度上的拍摄图像被映射到2D图像(平面图像)(例如，参见PTL1)。

此外，可获得下述再现装置：该再现装置对由存储装置存储的全方向图像的编码流进行解码，并使用作为解码结果而获得的全方向图像在观看者的视野范围内显示纹理图像。当粘贴有全方向图像的3D模型(诸如球体或立方体等)的表面被从作为3D模型内部的一个点的视点、在观看者的视线方向上观看时，如上所述的这种再现装置在观看者的视野范围内显示纹理图像。因此，再现了来自预定视点的观看者的视野范围内的拍摄图像。

引用列表

专利文献

[专利文献1]

日本专利特开第2006-14174号

发明内容

技术问题

然而，在全方向图像的生成时的视点和再现时的视点彼此不同的情况下，再现时的视点处的观看者的视野范围中的所生成的纹理图像包括全方向图像的生成时的视点的遮挡区域。因此，再现时的视点处的观看者的视野范围中的纹理图像的图片质量降低。遮挡区域是被前方的成像对象所隐藏的后方的成像对象的区域。

鉴于如上所述的这种情况做出了本公开，并且本公开使得可以使用全方向图像生成预定视点处的高图片质量的纹理图像。

[问题的解决方案]

本公开的第一方面的图像处理装置是包括图像生成部的图像处理装置，该图像生成部被配置成使用第一层图像和第二层图像来生成给定视点的纹理图像，其中，第一层图像包括第一视点处的全方向图像的纹理图像和深度图像，第二层图像包括在第一层图像的视点处的遮挡区域中的与第一视点不同的第二视点处的纹理图像和深度图像。

本公开的第一方面的图像处理方法对应于本公开的第一方面的图像处理装置。

在本公开的第一方面中，使用第一层图像和第二层图像来生成给定视点的纹理图像，其中，第一层图像包括第一视点处的全方向图像的纹理图像和深度图像，第二层图像包括在第一层图像的视点处的遮挡区域中的与第一视点不同的第二视点处的纹理图像和深度图像。

本公开的第二方面的图像处理装置是包括图像生成部的图像处理装置，该图像生成部被配置成生成第一层图像和第二层图像，其中，第一层图像包括第一视点处的全方向图像的纹理图像和深度图像，第二层图像包括在第一层图像的视点处的遮挡区域中的与第一视点不同的第二视点处的纹理图像和深度图像。

本公开的第二方面的图像处理方法对应于本公开的第二方面的图像处理装置。

在本公开的第二方面中，生成第一层图像和第二层图像，其中，第一层图像包括第一视点处的全方向图像的纹理图像和深度图像，第二层图像包括在第一层图像的视点处的遮挡区域中的与第一视点不同的第二视点处的纹理图像和深度图像。

应注意，可以通过使计算机执行程序来实现本公开的第一方面和第二方面的图像处理装置。