[发明专利]允许按照子画面或区域随机接入的视频编解码器以及使用该视频编解码器的视频合成概念

说明书

描述了允许更有效的视频合成/合并和/或渐进解码刷新的更有效实现的视频编解码器概念以及例如就合成/合并任务的复杂性而言允许视频合成/合并更有效的概念。

技术领域

本申请涉及视频编码和视频合成。

背景技术

各种应用利用子画面，即，为了单独编码和解码，将视频画面细分为子画面。在这些应用中，有360°视频和渐进解码刷新。

在360°视频的情况下，如图1的左侧所示，以不同的分辨率单独地提供子画面(HEVC情况下的图块)。如图1的中间所示，用户根据他们的观看方向选择一些高分辨率的图块和一些低分辨率的图块，并且如图10的右侧所示，将其合并为共同比特流。每当用户改变其观看方向时，高分辨率和低分辨率的图块集改变。然而，并非所有的高分辨率图块都会转换为低分辨率图块，反之亦然。这意味着仅对于改变其分辨率的图块子集，需要切换点，切换点通常是该特定子画面比特流的随机接入点(RAP)。

渐进解码刷新(GDR)是一种在非RAP处开始解码比特流的机制，并且能够在解码给定数量的画面之后以与如同解码过程是在RAP处开始的一样的相同的质量显示视频，如图11所示。

例如，在图11中，四个连续的非RAP画面(以编码顺序900连续的)示出为被相等地细分为三个图块组tile_group0、tile_group1和tile_group2，即，细分为相应画面的区域。视频902的画面由附图标记904a至904d表示，并且使用附图标记906来表示它们被细分成的区域。每个区域906被指示为以独立的方式编码，即以形成随机接入点的方式(即，通过在其中写入“IRAP”)，或者不以独立的方式编码，即被指示为以参考其他画面的方式编码(通过在其中写入“inter”)。图11所示的四个画面904a至904d中没有一个是所有区域906都被编码为随机接入点的。相反，在图11的示例中，仅其区域之一是随机接入点，但是在图11的示例中，三个连续画面(例如，画面904a至904c)的随机接入点区域在空间上完全覆盖视频902的画面的画面区域，因此，在此三联画面之后，可在解码器处获得无伪影的此三联画面的最后一张画面(此处为画面904c)，前提是编码器注意该画面904c的非RAP区域仅参考(例如，为了预测和/或熵上下文导出，即，就编码相互依赖性而言)RAP区域或本身直接或间接地仅对RAP区域具有编码依赖性的非RAP区域。也就是说，当解码以RAP开始时，不会立即获得干净的解码画面，而是稍后，在解码画面已被逐渐刷新以消除丢失参考的伪影之后获得干净的解码画面。此处，即是画面904c。通常，GDR可以通过将内容划分为区域(例如，图块)并且利用非对准的子画面RAP对其进行编码来实现。

作为所提到的两种情况中的任何一种的结果，跨不同子比特流的参考会有所变化。对于不同的子画面，RAP标记也没有清楚地完成，因为这样的子画面仅被以信号传达为I_SLICE类型(不应用对先前解码画面的预测)，并且仅通过不在参考画面列表中包括具有I_SLICE类型的画面之前的子画面来完成对同一子画面比特流的连续子画面的中断预测。

尽管存在上述现有视频编码概念，但是仍需要允许例如更有效的视频合成和/或渐进解码刷新的更有效实现的视频编码环境。

因此，本发明的目的是提供一种视频编解码器，其允许更有效的视频合成/合并和/或渐进解码刷新的更有效实现和/或例如就合成/合并任务的复杂性而言允许视频合成/合并更有效的概念。

发明内容

该目的通过本申请的独立权利要求的主题来实现。