[发明专利]图像处理装置及图像处理方法

权利要求书

1.一种图像处理装置，包括：

虚拟视点图像生成部，其被配置为从多个参考图像生成要成像在具有虚拟视点位置和视线方向的虚拟视点处的虚拟视点图像，所述多个参考图像在多个视线方向上的多个视点位置处成像。

2.根据权利要求1所述的图像处理装置，其中，

所述虚拟视点图像生成部基于所述虚拟视点的所述视线方向和沿其成像所述多个参考图像的视线方向，混合所述多个参考图像，以生成所述虚拟视点图像。

3.根据权利要求1所述的图像处理装置，其中，

所述虚拟视点图像生成部响应于所述虚拟视点的视线方向与所述多个参考图像的视线方向之间的相似性，分别向所述多个参考图像施加权重，以通过加权平均来生成所述虚拟视点图像。

4.根据权利要求3所述的图像处理装置，其中，

所述虚拟视点图像生成部响应于所述虚拟视点的视线方向与所述多个参考图像的视线方向之间的相似性，分别向所述多个参考图像施加权重，使得将较大的权重设置给具有较高相似性的参考图像，以通过加权平均来生成所述虚拟视点图像。

5.根据权利要求4所述的图像处理装置，其中，

所述虚拟视点的视线方向与所述多个参考图像的视线方向之间的相似性是由所述虚拟视点的视线方向和所述多个参考图像的视线方向限定的角度，或所述虚拟视点和所述多个参考图像的视点位置之间的距离。

6.根据权利要求1所述的图像处理装置，其中，

所述虚拟视点图像生成部获取包括指定所述多个参考图像的信息的元数据，并且分别向由所述元数据指定的所述多个参考图像施加权重，以通过加权平均来生成所述虚拟视点图像。

7.根据权利要求6的图像处理装置，其中，

当响应于分别针对多个微视差虚拟视点的所述多个参考图像的视线方向的相似性，分别向所述多个参考图像施加权重，使得将较大的权重设置给具有较高相似性的参考图像以计算加权平均时，由所述元数据指定的所述多个参考图像是指示最大权重的所述参考图像，所述多个微视差虚拟视点相对所述虚拟视点提供不同的微视差。

8.根据权利要求1所述的图像处理装置，其中，

对应于所述虚拟视点的参考图像和多个微视差虚拟视点的所述多个参考图像构成立体图像，在所述微视差虚拟视点处关于所述虚拟视点生成微视差。

9.根据权利要求1所述的图像处理装置，其中，

所述参考图像中的每一个均为全方位图像，并且

所述虚拟视点图像生成部针对构成所述全方位图像的每个面，从所述多个参考图像生成要在具有所述虚拟视点位置和所述视线方向的所述虚拟视点处成像的虚拟视点图像。

10.根据权利要求1所述的图像处理装置，其中

所述参考图像包括具有全方位图像的纹理图像和深度图像的第一层图像。

11.根据权利要求10所述的图像处理装置，其中

所述参考图像还包括第二层图像，所述第二层图像具有在所述第一层图像的视点处的遮挡区域中的纹理图像和深度图像。

12.根据权利要求1所述的图像处理装置，其中

所述虚拟视点由头戴式显示器检测，并且

所述虚拟视点图像由所述头戴式显示器显示。

13.一种图像处理方法，包括步骤：

从在多个视线方向上的多个视点位置处成像的多个参考图像，生成要在具有虚拟视点位置和视线方向的虚拟视点处成像的虚拟视点图像。

14.一种图像处理装置，包括：

元数据生成部，被配置为使用在多个视线方向上的多个视点位置处成像的多个参考图像，来生成用于生成要在具有虚拟视点位置和视线方向的虚拟视点处成像的虚拟视点图像的元数据。