[发明专利]用于生成现实世界场景的定制视图的虚拟化投影以包括在虚拟现实媒体内容中的方法和系统

权利要求书

1.一种方法，所述方法包括：

通过虚拟化投影生成系统接收多个捕获的表面数据帧序列，所述多个捕获的表面数据帧序列每个都包括颜色和深度帧，所述颜色和深度帧按照包括在与现实世界场景的不同视图相关联的多个捕获参数集中的相应捕获参数集来描绘所述现实世界场景，所述多个捕获的表面数据帧序列中的每个表面数据帧序列都是由相对于所述现实世界场景设置在不同位置以捕获所述现实世界场景的所述不同视图的多个捕获设备中的不同捕获设备捕获的；

通过所述虚拟化投影生成系统识别附加捕获参数集，所述附加捕获参数集与包括在所述多个捕获参数集中的所述捕获参数集不同，并且与所述现实世界场景的定制视图相关联，所述现实世界场景的定制视图与由所述多个捕获设备捕获的所述现实世界场景的所述不同视图不同；

基于所述多个捕获的表面数据帧序列中的所述表面数据帧序列的至少一个并且基于所述附加捕获参数集，通过所述虚拟化投影生成系统，对用于所述现实世界场景的所述定制视图的虚拟化投影的颜色和深度帧进行渲染；以及

通过所述虚拟化投影生成系统提供虚拟化表面数据帧序列以包括在媒体播放器设备的虚拟现实媒体内容中，所述虚拟化表面数据帧序列包括用于所述现实世界场景的所述定制视图的所述虚拟化投影的经过渲染的颜色和深度帧。

2.根据权利要求1所述的方法，其中：

所述现实世界场景的所述定制视图与由相对于所述现实世界场景设置在所述不同位置的所述多个捕获设备捕获的所述现实世界场景的所述不同视图不对齐；以及

对用于所述现实世界场景的所述定制视图的所述虚拟化投影的所述颜色和深度帧进行渲染包括：基于所述多个捕获的表面数据帧序列中的至少两个所述表面数据帧序列对颜色和深度帧进行渲染。

3.根据权利要求1所述的方法，其中，包括在与所述现实世界场景的所述不同视图相关联的所述多个捕获参数集中的每个捕获参数集都包括以下中的至少一个：

表示相对于所述现实世界场景的位置的捕获参数，与所述现实世界场景的特定视图对应的颜色和深度帧是从所述位置捕获的；

表示方位的捕获参数，与所述现实世界场景的所述特定视图对应的所述颜色和深度帧是从所述方位捕获的；

表示视野的捕获参数，与所述现实世界场景的所述特定视图对应的所述颜色和深度帧是利用所述视野来捕获的；以及

表示图像质量的捕获参数，与所述现实世界场景的所述特定视图对应的所述颜色和深度帧是利用所述图像质量来捕获的。

4.根据权利要求1所述的方法，其中，与所述现实世界场景的所述定制视图相关联的所述附加捕获参数集包括以下中的至少一个：

表示与所述现实世界场景的所述定制视图相关联的定制视野的捕获参数，所述定制视野比与所述表面数据帧序列的至少一个相关联的捕获的视野窄，对用于所述虚拟化投影的所述颜色和深度帧进行渲染是基于所述表面数据帧序列；以及

表示与所述现实世界场景的所述定制视图相关联的定制图像质量的捕获参数，所述定制图像质量低于与所述表面数据帧序列的至少一个相关联的捕获的图像质量，对用于所述虚拟化投影的所述颜色和深度帧进行渲染是基于所述表面数据帧序列。

5.根据权利要求1所述的方法，其中，识别所述附加捕获参数集包括：

相对于所述现实世界场景的一个或多个几何特性分析所述现实世界场景；

基于对所述现实世界场景的分析，生成多个附加捕获参数集，所述多个附加捕获参数集与包括在所述多个捕获参数集中的所述捕获参数集不同并且包括所述附加捕获参数集；以及

从所述多个附加捕获参数集识别所述附加捕获参数集。

6.根据权利要求1所述的方法，其中，被提供以包括在所述虚拟现实媒体内容中的所述虚拟化表面数据帧序列被封装，使得用于所述现实世界场景的所述定制视图的所述虚拟化投影的经过渲染的颜色和深度帧被包括在传输流中，所述传输流不包括表示除了所述虚拟化表面数据帧序列以外的附加表面数据帧序列的颜色和深度帧。