[发明专利]三维视频的重建

说明书

在一个实施方式中，方法包括访问展现场景的360°视图的多个图像，每个图像展现360°场景的一部分以及包括第一重叠区域和第二重叠区域，第一重叠区域对应于与第一相邻图像的重叠，以及第二重叠区域对应于与第二相邻图像的重叠。方法还包括基于重叠区域中的一个或多个特征点，为每个重叠区域计算单应性的集合。方法还包括根据多个图像创建左图像的集合，左图像的集合展现场景的第一360°视图。方法还包括根据多个图像创建右图像的集合，右图像的集合展现场景的第二360°视图。

技术领域

本公开大致涉及三维图像。

背景技术

人类大脑基于双眼之间的图像差异来感知三维(3-D)图像。通过使用从略微不同的角度获得的相同场景的两个图像，能够以高精确度对距对象的距离进行三角测量。每只眼睛观察由左眼和右眼看到的对象的略微不同的角度。3-D图像的使用允许观看者沉浸在另一环境中，以及在一些情况下允许观看者从不同的有利位置观看例如体育事件或音乐会的事件。

一些图像采集系统基于采集立体2-D图像。作为示例，可以使用通过使用成对的空间分隔开的平行摄像机采集的2-D图像来构建3-D图像。作为另一示例，当采集立体图像中的第二个图像时，可以物理地移动单个摄像机以产生空间偏移。在许多情况下，图像采集系统限于在限定的角度内采集3-D图像。

3-D显示器通常通过向观看者的左眼和右眼分别呈现两个偏移图像来提供对2-D图像深度的感知。这些2-D图像随后在大脑中进行组合以给出3-D深度的感知。显示“偏移”2-D图像以提供深度感知的其它示例性方法包括在观看者的眼睛上使用色度相反的滤色器(例如，红色和蓝绿色)、不同的偏振或镜头快门。

发明内容

技术方案

方法，包括：访问展现场景的360°视图的多个图像，每个图像展现360°场景的一部分以及包括第一重叠区域和第二重叠区域，第一重叠区域对应于与第一相邻图像的重叠，以及第二重叠区域对应于与第二相邻图像的重叠；

基于重叠区域中的一个或多个特征点，为每个重叠区域计算单应性的集合；根据多个图像创建左图像的集合，左图像的集合展现场景的第一360°视图；根据多个图像创建右图像的集合，右图像的集合展现场景的第二360°视图；使用所计算的单应性将左图像拼接在一起，从而生成拼接的360°左图像；以及使用所计算的单应性将右图像拼接在一起，从而生成拼接的360°右图像。

附图说明

图1示出示例性3-D图像系统结构。

图2示出摄像机的示例性立体对。

图3示出摄像机系统的示例性摄像机配置的部分平面图。

图4示出示例性摄像机系统的平面图。

图5示出由摄像机系统的摄像机采集的图像的示例性集合。

图6示出示例性摄像机系统的侧视图。

图7示出由摄像机系统的摄像机采集的重叠图像的示例性集合。

图8示出用于拼接离散图像的示例性方法。

图9和图10示出用于拼接离散图像的其它示例性方法。

图11示出图像的示例性分割。

图12示出图像的示例性特征点匹配。

图13示出示例性顶部图像和示例性主拼接图像。

图14示出图13的处理之后的示例性顶部图像。

图15和图16示出用于拼接离散图像的示例性方法。

图17示出包括各种视频数据分量的内容包。

图18示出配置成将内容包广播为复合流的内容服务器。