[发明专利]用于多层视频传输的自适应内插滤波器

说明书

对相关申请的交叉引用

本公开要求2009年4月20日递交的美国临时申请第61/170,995号、2009年7月4日递交的美国临时申请第61/223,027号、2010年1月14日递交的美国临时申请第61/295,034号以及2010年2月1日递交的美国临时申请第61/300,427号的优先权，所有这些申请的全部内容通过引用合并于此。

技术领域

本公开涉及图像处理和视频压缩。更具体地，本公开的实施例涉及多层视频传输。多层视频传输的示例性实施例包括但不限于2D可伸缩编码(scalable coding)、2D兼容的3D以及帧兼容的3D。

背景技术

为了在消费者中促进对立体(3D)内容的迅速采用，理想的家用3D系统应该是可以以对诸如机顶盒、DVD和蓝光碟播放器的现有播放设备进行最小改动或者不进行改动而实现的家用3D系统。理想的家用3D系统也应该最大限度地与现有的具有3D功能的显示器相兼容，诸如三星(Samsung)和三菱(Mitsubishi)的DLP(参见参考文献1，其全部内容通过引用合并于此)显示器、一些等离子显示器、以及基于偏振的和帧顺序的(frame sequential)LCD显示器。

对于全分辨率3D内容的期望已经产生了一些系统，例如MPEG-4AVC/H.264视频编码标准(参见参考文献3，其全部内容通过引用合并于此)的多视图视频编码(Multiview Video Coding，MVC)扩展，以利用两个或者更多个层，其中，基础层代表一个视图而每个增强层代表附加的视图，所有这些层均处于原始分辨率。

H.264/AVC的可伸缩视频编码(Scalable Video Coding，SVC)扩展([2]中的附录G)定义了用于2D视频编码的多层视频编码系统。SVC扩展提供了各种类型的可伸缩性：空间可伸缩性、质量可伸缩性、时间可伸缩性或者以上各项的任意组合。例如，在空间可伸缩性中，基础层比特流携带较低空间分辨率的视频信号，而增强层比特流携带附加的信息，使得当一起解码增强层比特流与基础层比特流时，可获得较高空间分辨率的视频信号。再例如，在质量可伸缩性中，增强层比特流携带附加信息，该附加信息可改进基础层比特流所携带的视频信号的质量。本公开中的教导可进一步改进诸如SVC系统的2D可伸缩视频系统的编码性能，这一点在随后的描述中将变得明显。

附图说明

并入本说明书中并构成本说明书一部分的附图示出了本公开的一个或多个实施例，并与示例实施例的描述一起用于说明本公开的原理和实现。

图1示出了用于立体内容的传输的水平采样/并排排列。

图2示出了帧兼容3D系统架构。

图3示出了编码侧的帧兼容3D系统架构的图。

图4示出了解码侧的帧兼容3D系统架构的图。

图5示出了在给定用于水平采样+并排压缩排列的基础层的情况下对增强层的预测处理。

图6示出1D自适应滤波器的示例。

图7示出根据本公开实施例的改进的参考处理单元。

图8示出编码器处的选择性参考处理。

图9示出基础层视频的滤波。

图10示出多层帧兼容3D视频系统。

具体实施方式

概述

本公开的实施例涉及图像处理和视频压缩。

全部内容通过引用合并于此的美国临时申请第61/170,995号公开了一种使得能够对图像或视频信号进行经指导的处理(guided processing)的系统，这种经指导的处理可用在视频压缩或后处理(post processing)应用中。例如，处理可为利用特定的滤波器或者机制对图像进行滤波或或内插(分级)，该特定的滤波器或者机制可以导致某些期望的性能或行为。