[发明专利]合成立体视觉图像内容捕获

说明书

本申请涉及合成立体视觉图像内容捕获。提供用于捕获合成立体视觉内容的系统、方法和计算设备。示例计算设备包括至少一个处理器和存储器。存储器存储使得计算设备接收三维场景的指令。指令还可以使得计算设备重新定位三维场景的顶点，以补偿定向立体视觉投射中相机位置的变化，并基于所重新定位的顶点来生成立体视觉图像。示例方法包括将三维场景投射到左眼图像立方体和右眼图像立方体上，以及新定位三维场景的顶点，以针对从单个相机位置进行渲染来调整。所述方法还包括将立体视觉图像的像素映射到左眼图像立方体和右眼图像立方体上的点，以及使用所映射的像素的值来生成立体视觉图像。

分案说明

本申请属于申请日为2018年4月27日的中国发明专利申请201880025565.1的分案申请。

相关申请的交叉引用

本申请要求于2017年4月27日提交的美国申请No.62/491,201的优先权，并通过引用将其全部内容合并于此。

技术领域

本公开涉及合成立体视觉图像内容捕获。

背景技术

全向立体(ODS)是360度立体视觉视频的投射模型。ODS可以与头戴式显示器(HMD)一起使用，以显示立体视觉影像。通过ODS，可以使用常规视频格式和工具存储、编辑和传输360度立体视觉视频。在ODS中，将帧在水平方向上分为顶部的左眼图像和底部的右眼图像。左眼和右眼的图像都是360度图像，其包括使用等矩形(equirectangular)投射映射到二维(2D)表面的整个视场。

360度立体视觉视频内容有各种来源。例如，360度立体视觉视频内容的一个来源是物理360度相机设施。360度立体视觉视频内容的另一个来源是可生成合成世界的三维(3D)渲染引擎，包括游戏引擎。在一些实施例中，将360度立体视觉视频实时流送，例如在视频游戏期间让其他人共享虚拟现实(VR)体验或一道跟随。

用于从诸如游戏引擎的合成来源捕获360度立体视觉视频的传统技术对于内容开发者而言可能是复杂、耗时且容易出错的，并且对于常规用户而言可能是完全做不到的。

发明内容

本文献大体涉及用于捕获合成立体视觉内容的技术。例如，合成立体视觉内容可通过视频游戏引擎生成并流送给观看者。

一个方案是一种包括至少一个处理器和存储器的计算设备。存储器存储指令，所述指令在被至少一个处理器执行时使得计算设备接收三维场景。指令还可以使得计算系统重新定位三维场景的顶点，以补偿定向立体视觉投射中相机位置的变化，并基于所重新定位的顶点来生成立体视觉图像。

另一个方案是一种方法，所述方法包括：将三维场景投射到左眼图像立方体和右眼图像立方体上，以及重新定位三维场景的顶点以针对从单个相机位置进行渲染来调整。所述方法还包括：通过基于左眼图像立方体和右眼图像立方体确定立体视觉图像的像素的值来生成立体视觉图像。

另一个方案是一种方法，所述方法包括：将三维场景投射到等矩形圆柱体上以及确定所投射的三维场景的顶点的左偏移矢量和右偏移矢量。所述方法还包括：复制所投射的三维场景以生成复制场景，以及以统一偏移量偏移复制场景的顶点。所述方法还包括：将左偏移矢量应用于所投射的三维场景和复制场景中的至少一个的顶点；生成所投射的三维场景和复制场景的顶点的齐次坐标；以及投射所投射的三维场景和复制场景的顶点以生成立体视觉图像。

附图说明

图1是示出根据示例实施方式的系统的框图。

图2A至图2D是具有处于各种旋转的虚拟相机组件的场景的示例俯视图的示意图。

图3是示出根据本文所述实施方式的示例ODS格式图像文件的构成的示意图。

图4是根据本文所述实施方式的示例VR180格式图像文件的构成的示意图。