[发明专利]信息处理装置、信息处理方法、再现处理装置和再现处理方法

说明书

提供了一种信息处理装置、再现处理装置、信息处理方法和再现处理方法，通过这些装置和方法，客户端设备能够高效地选择内容配置。预处理单元针对具有表示虚拟空间的内容配置的一个或更多个内容生成用于确定内容的再现处理是否可能的内容配置选择信息，该内容配置由一个或更多个三维对象及其空间布置信息配置。文件生成单元生成包含虚拟空间的数据和内容配置选择信息的文件。

技术领域

本发明涉及信息处理装置、信息处理方法、再现处理装置和再现处理方法。

背景技术

在当前视频分发中，主要分发用于分发电影等的二维视频。在下文中，二维视频可以被称为二维(2D)内容。此外，在网络上的视频发布站点上也发布能够在所有方向上观看的360度视频。在所有方向上能够观看指示可以自由选择视线方向。360度视频被称为3自由度(3DoF)视频或3DoF内容。在2D内容和3DoF内容两者中，基本从分发服务器分发二维编码的视频并且将其显示给客户端。

还存在被称为3DoF+内容的内容。3DoF+内容是可以与3DoF内容类似地在所有方向上观看的内容，并且还允许视点位置的稍微偏移。假设在3DoF+内容中的视点位置的偏移在用户可以在就座状态下移动头部的范围内被允许。在3DoF+内容中，通过使用一个或多个二维编码的视频来实现视点位置的偏移。

此外，已经提出了分发被称为6DoF内容的6DoF视频作为具有更高自由度的视频。6DoF视频是可以在三维空间中的所有方向上观看并且可以通过在所显示的三维空间中四处走动来观看的视频。在三维空间中四处走动意味着可以自由选择视点位置。在下文中，三维空间可以被称为3D空间。

6DoF内容是三维内容，其中三维空间由一个或多个三维模型数据表示。三维模型数据可以被称为3D模型数据，并且三维内容也可以被称为3D内容。

作为分发6DoF内容的方法的示例，通过利用多个三维模型数据配置三维空间，将6DoF内容作为多个对象流发送。此时，可以使用被称为场景描述的关于三维空间的配置信息。其示例是运动图像专家组(MPEG)-4场景描述。作为表示方法的场景描述是这样的方法，其中场景由被称为场景图的具有树分层结构的图来表示，而场景图以二进制格式表示。

6DoF内容是表示用每个时间的三维模型数据表示三维空间的视频材料。用于表示6DoF内容的方案的示例包括以下三种方案。

一种方案是在本发明中被称为基于对象的表示方案的表示方案。在基于对象的表示方案中，6DoF内容具有这样的内容配置，其中在三维空间中布置诸如人或物的每个三维对象的三维模型数据以表示整个三维空间，该三维对象是要在视频中显示的个体目标对象。基于对象的表示方案的特征在于，执行6DoF内容的再现的客户端同时处理三种方案之间的最大数目的三维模型数据。另一方面，在基于对象的表示方案中，在显示诸如个体人或物的每个三维对象时可以改变定义。因此，可以说基于对象的表示方案是这样的配置方法，其中在这三种方法中，客户端在再现处理中具有高自由度。

另一方案是在本发明中被称为基于空间的表示方案。在基于空间的表示方案中，6DoF内容具有这样的内容配置，其中整个目标三维空间被表示为一个三维模型数据，而不将诸如人或物的每个三维对象分开为三维模型数据。基于空间的表示方案的特征在于，在这三个方案中，客户端在再现时处理一个三维模型数据，需要最低的处理能力。另一方面，由于整个6DoF内容的定义是固定的，因此可以说客户端在再现处理中具有极低的自由度。