[发明专利]用于图像处理的方法和系统

权利要求书

1.一种用于图像处理的计算机实现的方法，包括：

确定用多个相机捕获的多个图像中的其中将二维数据变换为三维数据的区域；

计算所述区域中的部分像素的深度值；

生成球面图像，所述球面图像包括所述区域中的所述部分像素的图像数据；

使用所述图像数据在图像处理系统生成的计算机图形对象的三维空间中构造三维表面；

使用所述图像数据生成到所述计算机图形对象的表面的纹理映射，所述纹理映射包括将所述图像数据映射到所述计算机图形对象的表面；以及

发送所述球面图像和所述纹理映射，用于在头戴式显示设备中显示。

2.如权利要求1所述的方法，其中所述部分像素在所述计算机图形对象的表面上表示，所述计算机图形对象的半径等于与所述区域中的所述部分像素中的一个或多个相关联的相应深度值。

3.如权利要求1所述的方法，还包括：

生成与所述区域相关联的额外球面图像和纹理映射；

通过将图像数据的一部分和球面图像组合来产生左眼视图；

通过生成额外图像数据并将额外图像数据和额外球面图像组合来生成右眼视图；

在头戴式显示设备中显示左眼视图和右眼视图；并且

其中所述图像数据包括所述区域中的所述部分像素中的至少一些的深度值数据和RGB数据。

4.如权利要求1所述的方法，其中所述多个图像包括视频内容，并且其中所述图像数据包括与所述部分像素相关联的RGB数据和深度值数据，所述方法还包括：

使用图像数据，将所述区域的二维版本转换成所述区域的三维版本；以及

提供所述区域的三维版本用于在头戴式显示设备中显示。

5.如权利要求1所述的方法，其中所述多个图像用安装在球形相机套装上的多个相机进行捕获。

6.如权利要求1所述的方法，其中至少部分地基于在头戴式显示设备的头戴式显示器上检测到的用户输入来自动地执行其中将二维数据变换成三维数据的区域的确定。

7.如权利要求6所述的方法，其中用户输入包括头部转动，并且所述三维数据用于在与视图对应的所述多个图像中的至少一个中生成三维部分。

8.如权利要求6所述的方法，其中用户输入包括眼睛注视方向的改变，并且所述三维数据用于在用户视线中的所述多个图像中的至少一个中生成三维部分。

9.一种用于图像处理的计算机实现的系统，包括：

至少一个处理器；

存储器，存储指令，所述指令当由所述至少一个处理器执行时，使所述系统执行操作，所述操作包括：

确定用多个相机捕获的多个图像内的其中将二维数据变换成三维数据的区域；

计算所述区域中的部分像素的深度值；

生成球面图像，所述球面图像包括所述区域中的所述部分像素的图像数据；

使用所述图像数据在图像处理系统生成的计算机图形对象的三维空间中构造三维表面；

使用所述图像数据生成到所述计算机图形对象的表面的纹理映射，所述纹理映射包括将所述图像数据映射到所述计算机图形对象的表面；以及

发送所述球面图像和所述纹理映射，用于在头戴式显示设备中显示。

10.如权利要求9所述的系统，还包括：

生成额外球面图像和纹理映射；

通过将图像数据的一部分和球面图像组合来产生左眼视图；

通过生成额外图像数据并将额外图像数据和额外球面图像组合来生成右眼视图；

在头戴式显示设备中显示左眼视图和右眼视图；并且

其中所述图像数据包括所述区域中的所述部分像素中的至少一些的深度值数据和RGB数据。