[发明专利]可分级视频编码中的FGS标识

说明书

技术领域

本发明一般性地涉及视频编码。更具体地，本发明涉及可分级视频编码。

背景技术

传统视频编码标准，例如运动图像专家组(MPEG)-1，H.261/263/264标准，结合运动估计和运动补偿以便消除视频帧之间的时间冗余。H.264/AVC(AVC表示高级视频编码)标准的可分级扩展目前支持精细粒度分级，据此，可以通过以10％或更小的增量增加比特率使视频序列的质量得以改善。目前，精细粒度分级性(FGS)信息不被视为单独的“层”，而是改为随着它相对于其被编码的“基本层”一起存储。然而，当形成后续增强层时，如果可以选择该增强是基于具有FGS的基本层还是基于没有FGS的基本层，将是有益的。

传统的系统虽然是适度有用的，但其至少包括两个实质性问题。第一，分级性并非总是沿着“线性”路径的。例如，可能期望具有一个以某个最低可接受质量进行编码的低空间分辨率基本层，它具有用以增强质量的FGS。此外，还可能期望具有一个相对于基本层而被编码的空间增强(不包括FGS)。这可能被期望，其原因是例如在传输信道上对比特率有限制，其中当只需要空间增强时，该传输信道不允许传输额外FGS数据的“开销”。

在目前计划的H.264/AVC可分级性扩展中，FGS信息不被视为单独的层。在片头(slice header)中，语法元素base_id_plus用来指示增强层图像的基本层图像。然后，没有这样的机制可以用于规定后续增强层是相对于具有FGS的基本层还是没有FGS的基本层而被编码，以及如果具有FGS，是哪个FGS层。换言之，操作必须是“硬连线的”。

第二，渐进增强/细化片(即，FGS片)和相应的基本层图像目前被设想为处于同一图像中，并因此被设想为在同一访问单元中。这些项目针对DependencyId还具有相同的值。对于系统层操作而言这种体系结构不是最优的。在媒体文件格式中，例如，ISO/IEC14496-15中规定的AVC文件格式中，典型地会为每个包含图像或访问单元的采样存储元数据信息。因此，即使是对于非FGS可分级流(即，当FGS片的截断无需到达期待的可分级呈现点时)，上述图像(访问单元)的定义仍然需要一个流服务器来解析为采样。从这个角度看，目前的设计强迫媒体文件格式存储具有更高复杂性的可分级视频内容，这意味着流服务器操作也具有更高的复杂性。

发明内容

本发明涉及在与其相应的基本信息分离的层中对FGS信息编码。根据本发明的一种实施方式，每个FGS增强层被制成其各自的图像，并被赋予唯一的DependencyId值。在这种意义上，FGS增强平面或层以和诸如空间增强层之类的其它增强层相同的方式被处理。FGS增强层的基本层图像被制成另外的图像，并具有其自己的DependencyId值。后续增强层将相对于该质量基本层或FGS增强层而被编码。本发明的这种系统在可分级视频编码中提供了灵活性水平改善，并同时使复杂性较低。

根据本发明的另一种实施方式，每个FGS增强层不被制成其各自的图像，并因此没有被赋予唯一的DependencyId值。然而，与每个FGS增强层相关联的QualityLevel值被用以标识后续增强层是相对于具有FGS的基本层而被编码还是相对于没有FGS的基本层而被编码，以及如果具有FGS，是哪个FGS层。这一点可以通过在比特流中例如在片头中包含新的语法元素来实现，以指示相应FGS片的QualityLevel值在后续增强层的编码中被参考。在这种情况下，片头中的base_id_plus1仍被用来指示被第一FGS层和后续增强层所参考的质量基本层的DependencyId值。

根据本发明的另一种实施方式，每个FGS增强层被制成其各自的图像，并被赋予唯一的DependencyId值。与每个FGS增强层相关联的DependencyId被用来标识后续增强层是相对于具有FGS的基本层还是没有FGS的基本层而被编码，以及如果有FGS，是哪个FGS层。这可以通过在比特流中例如在片头中包含新的语法元素来实现，以指示在后续增强层编码中被参考的FGS片所关联的DependencyId值。这时，片头中的base_id_plus1仍被用来指示被第一FGS层和后续增强层所参考的质量基本层的DependencyId值。

本发明的这些以及其它目的、优势和特征，及其操作的组织和方式，将在下文结合附图的详细说明中得以明晰，其中下文描述的附图中，类似的元件具有类似的数字。

附图说明

图1是一种在其内可以实施本发明的系统的总体框图；