[发明专利]预测增强空间层帧的丢失或受损块的方法和与之相适应的SVC解码器

说明书

技术领域

本发明涉及对增强空间层帧的丢失或受损块的预测。

背景技术

可伸缩视频编码(SVC)是在一个单独的视频流中提供具有不同 质量的相同内容的方法。质量的不同可能与时间分辨率、空间分辨率 或信噪比分辨率有关。

在空间可伸缩视频编码中，视频图像帧被编码在一个空间基本层 和一个或多个增强空间层中。基本层提供视频帧的低分辨率版本，增 强空间层承载相同内容的较高分辨率版本。

如果某块丢失或受损，预测所需的运动信息和/或残差信息也会丢 失或受损。

可以通过按比例放大来自相应的较低空间层帧的对齐块的残差， 来近似增强空间层帧的丢失或受损块的残差信息。

类似地，也可以通过按比例放大来自相应的较低空间层帧的对齐 块的预测，来近似丢失或受损的增强层块的预测。

然而，如果设备总体上能够接收和解码特定的增强空间层帧，那 么将不会对比所述特定增强空间层帧低的层中的帧。因此，一旦数据 丢失，首先需要确定相应的较低空间层帧的预测。如果相应的较低空 间层帧是帧内预测，那么该方法行之有效。但是，如果相应的较低空 间层帧是借助参考帧而进行帧间预测的，而该参考帧自身也是借助另 一个(可能也是帧间预测得到的)考帧进行帧间预测的，那么对上述 相应的较低空间层帧进行解码将会是耗时的。

在本领域中，目前正在努力提高对丢失或受损的增强空间层块的 预测。

发明内容

本发明致力于此，并提出了一种用于预测增强空间层帧的丢失或 受损块的方法，其中所述方法包括权利要求1的特征。

所述方法包括以下步骤：借助与所述增强空间层帧相对应的较低 空间层帧的参考信息，在增强空间层中确定一辅助帧，借助所述辅助 帧生成信息减少的块，以及借助该信息减少的块来预测丢失或受损块。

可以独立于任意较低空间层参考帧对相应的较低空间层帧的参考 信息进行解码，并且辅助增强空间层帧是已经解码的。因此，降低了 计算量。通过生成信息减少的块，使预测变得更加平滑，从而令用户 观看的画面更加柔和，因此减少了画面的棱角。

在一实施例中，该方法进一步包括：通过借助所述辅助帧来生成 信息减少的帧，以及通过借助来自与所述丢失或损坏块相对应的所述 较低空间层帧的较低层块的运动信息，来确定信息减少的块。

所述方法的实施例可以进一步包括：通过将辅助帧按比例缩小至 所述较低空间层，来生成信息减少的帧。

并且，所述实施例可以进一步包括：将信息减少的块与所述相应 的较低层块的残差信息合并在一起，将该合并按比例放大至所述增强 空间层，以及借助该按比例放大的合并来隐藏丢失或受损块。

在另一个实施例中，该方法进一步包括：将所述运动信息按比例 放大至增强空间层，借助所述按比例放大的运动信息来确定所述辅助 帧中的辅助块，以及除去所述辅助块中的细节信息，同时保持增强空 间分辨率。

在又一个实施例中，该方法可以进一步包括：通过从辅助帧中除 去细节信息而以增强空间分辨率生成信息减少的块，并且确定信息减 少的块中包括将所述运动信息按比例放大至增强空间层。

另一实施例和/或再一实施例可以包括：将所述相应较低层块的残 差按比例放大至所述增强空间层，将信息减少的块与按比例放大的残 差合并，以及用合并结果隐藏丢失或受损块。

本发明进一步提出了一种适用于预测增强空间层帧的丢失或受损 块的SVC解码器，所述SVC解码器包括权利要求8的特征。

即，所述SVC解码器包括：借助来自与所述增强空间层帧相应的 较低空间层帧的参考信息来确定增强空间层中的辅助帧的装置；块产 生器，用于借助所述辅助增强帧来生成信息减少的块；以及借助信息 减少的块来预测丢失或受损块的装置。

所述SVC解码器可以被实施为进一步包括：借助所述辅助帧来生 成信息减少的帧的装置；以及用于借助来自与所述丢失或受损块相对 应的所述较低空间层帧的较低层块的运动信息来确定所述信息减少的 帧中的信息减少的块的装置。

在另一个SVC解码器的实施例中，生成装置适于将所述辅助帧按 比例缩小至所述较低空间层。