[发明专利]视频位流中的渲染定向信息

说明书

说明

相关申请的交叉引用

本申请要求2011年3月10日提交的题为“Render Orientation Information in Video Bitstream(视频位流中的渲染定向信息)”美国临时专利申请序列号为61/451,303的优先权，该申请的公开内容通过引用整体纳入于此。

技术领域

本申请涉及视频编码，更具体地涉及视频位流中与重构的视频位流的空间定向相关的信息的表示。

背景技术

在视频会议和数字TV环境中构思某些视频编码标准，其中所捕捉或重构的视频信号的空间分辨率和定向在捕捉/编码器和解码器/显示地点上是相同的。例如，TV信号可在4：3或16:9高宽比的横向格式下捕捉，并同样以横向格式渲染(尽管可基于用户偏好在接收的TV中调整高宽比)。巧合的是，某些视频压缩标准，包括ITU-T Rec.H.261、H.262、H.263、H.264(所有这些可从国际电信联盟(ITU)，Place de Nation，CH-1211Geneva20，瑞士或www.itu.int获得)，以及可从国际标准组织(ISO)1ch.de la Voie-Creuse,Case postale56,CH-1211Geneva20,瑞士或www.iso.org获得的MPEG-1图象(官方称其为ISO/IEC11172-2)和MPEG-4图象(官方称其为ISO/IEC14496-2)(所有这些通过引用整体纳入于此)不包括与所捕捉的视频信号的空间定向相关的信息。

使用连接至位于个人计算机(PC)、机顶盒、诸如蜂窝电话和平板计算机之类的移动设备或任何其它类似设备上的基于计算机的解码器/渲染装置的屏幕允许也以不是设备天生定向的定向来渲染视频图象，例如通过将它们置于屏幕上的“窗口”内。一些前述设备允许以不止一个定向被观看，这本质上是由于其被手持时的形状因素或由技术手段(回转监视器)确定。操作系统和GUI可能不关心重构的视频信号的“天生”定向。

前面提到的内容在理念上等同地适用于捕捉侧。尽管现在TV和视频会话视觉信号可(并大多数)以横向模式捕捉，然而没有技术理由不绕其捕捉轴旋转相机并由此在不同的定向进行捕捉。这样做需要渲染设备也使重构的图象旋转，由此实现自然的观看体验。

如果没有一种机构允许在视频位流中指示拟被渲染的视频位流(在重构后)的定向，则渲染设备无法对渲染定向作出消息灵通的判断，这可能导致不好的用户体验。

此外，电影制片人在制片过程中旋转相机是艺术表现的一种选择。为了忠实的观看体验，因为视频内容在一个序列中可能变化，因此旋转需要与视频内容同步。这使基于文件格式的定向信息，例如已知为JFIF标准的扩展的一种定向信息(草案ISO/IEC10918-5,其可从国际标准组织(ISO)1，ch.de la Voie-Creuse，Case postale56,CH-1211Geneva20，瑞士或www.iso.org获得并通过引用纳入于此)，无法提供要求的功能。为了相机定向与视频内容有意义的同步，定向信息需要供在视频位流中使用。

因此，在视频位流中可能希望具有一种允许信令拟被重构的位流的定向的机制。

发明内容

所披露的主题事项在视频位流中提供辅助信息以指示由重构后的位流导致的视频信号定向。

在一个实施例中，视频位流中的单个位指示“纵向”或“横向”模式。

在同一或另一实施例中，视频位流中的两个位指示与横向模式偏离0/90/180/270度。在同一或另一实施例中，视频位流中的两个位指示与纵向模式偏离0/90/180/270度。

在同一或另一实施例中，视频位流中的两个位指示与最后已知的相机位置偏离0/90/180/270度。

在同一或另一实施例中，视频位流中的两个位指示与重心轴偏离0/90/180/270度。图7a、7b、7c、7d示出相对于重心轴(701)位于0、90、180、270度的相机位置。在图7b中，重心轴(701)也是相机的自然定向。

在同一或另一实施例中，根据适当熵编码方案编码并位于位流中的整型数或浮点数指示离横向、纵向、最后已知的相机位置或重心轴的定向改变度数。