[发明专利]用于多视图自动立体显示器的深度图传送格式

说明书

对相关申请的交叉引用

本申请要求2013年4月4日提交的美国临时申请No.61/808422的优先权，其全部内容通过引用并入本文。

技术领域

本发明一般地涉及图像。更特别地，本发明的实施例涉及用于多视图自动立体显示器的深度图的传送的格式。

背景技术

不管是在电影院还是在家中，三维(3D)视频系统在增强用户体验方面都广受关注。这些系统使用立体或自动立体的表现方法，包括：立体影片、线偏振、圆偏振、快门眼镜和光谱分离。

当今市场上可获得的大多数3D显示器是立体电视(TV)，需要用户佩戴快门3D眼镜从而体验3D效果。将3D内容传送到这些显示器需要输送两个分离的视图：左视图和右视图。即将出现自动立体(无眼镜)显示器的大规模使用。这些显示器提供一定量的运动视差(parallax)；观看者可以轻微四处移动他/她的头以从极其不同的角度观看对象。

传统的立体显示器提供单一的3D视图；然而自动立体显示器(也被称为多视图显示器)基于该显示器的设计来提供多个视图，诸如5个视图、9个视图、28个视图等。当常规立体内容被提供至自动立体显示器时，该显示器提取深度图并基于该深度图来创建或呈现多个视图。如本文所使用的，术语“深度图”表示包含与从视点到场景物体的表面的距离相关的信息的图像或者其他比特流。如以下更详细解释的，深度图可以被容易地转换为视差图(disparitymap)，并且在本文的上下文中，术语深度图和视差图相同并且可互换。

深度图信息还可以被用于定制用于具有不同分辨率和显示器尺寸(例如1080p显示器或4K显示器)的不同显示器类型的3D体验。已有多个研究表明针对3D电影院设计的深度的量不适于较小的移动设备，并且反之亦然。深度图可以被用于重新呈现视图以改变感知的深度并且做出额外的调整。如本文中发明人所理解的，期待用于与内容一起传送深度图的改进的技术以改进使用自动立体和立体显示器的用户体验。进一步被理解的，这些改进的技术优选地与现有的单一视图(2D)和3D系统反向可兼容。

本节中描述的方法是可以被寻求的方法，但不一定是以前设想过或寻求过的方法。因此，除非另外指出，否则不应当仅仅因为本节描述的任何方法被包括在本节中就假定它们是现有技术。类似地，除非另外指出，否则不应该基于本节假设任何现有技术中已经认识到相对于一个或多个方法确定的问题。

附图说明

在附图中的图中通过示例的方式而不是限制的方式来描述本发明的实施例，并且附图中相同的附图标记表示类似的元件，其中：

图1示出了根据本发明的实施例的用于传送3D视频和相关联深度数据的示例系统；

图2示出了非对称单一层深度图传送格式的示例。

图3示出了根据本发明的实施例的使用旋转深度图的非对称深度图传送格式的示例。

图4A和图4B示出了根据本发明的实施例的深度图传送格式的示例。

图5示出了根据本发明的实施例的用于使用深度图旋转和深度图段两者来生成图像数据和深度图数据区段的示例过程。

具体实施方式

本文描述了用于立体和自动立体(多视图)显示器的深度图的传送格式。这些格式支持多种视频传送情景，包括传统的线缆、卫星或空中(overtheair)广播和过顶(overthetop)传送。在以下描述中，出于解释的目的，解释多个具体的细节从而提供对本发明的透彻的理解。然而清楚的是，即使没有这些具体的细节，本发明也可以被实现。在其它实例中，公知的结构和设备未被无遗漏地描述以避免不必要地模糊本发明。

概述

此处描述的示例实施例涉及用于多视图显示器的深度图信息的传送格式。给定3D输入图片和对应的输入深度图数据，可以创建组合图像数据区段和深度图数据区段的多路复用的非对称的输出图像帧，其中该图像数据区段具有与深度图数据区段不同的尺寸。该图像数据区段包含3D输入的输入视图中的一个或多个，而深度图区段至少包含相对于多路复用的输出图像帧中的图像数据的取向而旋转的输入深度图数据的一部分。

在一些实施例中，深度图数据还可以被分段为一个或多个深度图段，所述一个或多个深度图段可以在被多路复用为输出图像帧的深度图部分之前被重新布置。

针对3D的示例传送格式