[发明专利]对360度图像及视频编码或解码的方法、设备及存储介质

说明书

本申请实施例提供一种对360度图像及视频编码或解码的方法、设备及存储介质，该方法用于在解码器中对已编码视频序列内的已编码的图像或图片进行解码，所述图像或图片表示非平面在平面上的投影，可以包括获取至少一个临时的量化参数差分QP值，所述量化参数差分QP值与多个第一块中的至少一个第一块相关；对与第二块相关的量化参数QP值进行解码；将所述量化参数差分QP值与所述量化参数QP值进行组合，以生成最终量化参数QP值；使用所述最终量化参数QP值对与所述第二块相关的至少一个值进行逆量化。

交叉引用

本公开请求2018年10月1日提交的第16/148,380号，名称为“360度图像及视频编码的QP编码方法”的美国申请的优先权，在先申请的全部内容通过引用方式结合在本申请中。

技术领域

本申请公开的主题涉及图像和视频的编码与解码，特别是涉及在平面视频编解码器的输入是从非平面内容例如360度视频人工创建的环境中，基于内容的(空间)几何统计关系的量化参数语法元素的有效编码。

背景技术

利用具有运动补偿的图像间预测的视频编码和解码已在几十年来为人所知。未压缩的数字视频可由一系列图像组成，每个图像具有一定的空间维度，例如1920x 1080的亮度样本和相应的色度样本。图像序列可具有固定或可变的图像速率(俗称帧率)，例如，每秒60张图像或60Hz。未压缩的视频需要较高的比特率。例如，每个样本为8比特的1080p60 4：2：0(60Hz帧率下的1920x1080亮度样本分辨率)的视频需要接近1.5G比特/秒的带宽。长度为一小时的这种视频需要600G字节以上的存储空间。

视频编码和解码的一个目的是，通过压缩来降低输入视频信号的冗余。在一些情况下，压缩可有助于减小带宽或存储空间的需求，一些情况下可以减少两个数量级甚至更多。可使用无损压缩、有损压缩，或其组合。无损压缩指可从经过压缩的原始信号中重建出原始信号的精确副本的技术。当利用有损压缩时，重建信号可与原始信号不一致，但原始信号和重建信号之间的失真足够小，以使重建信号能够实现所期望的用途。视频领域中广泛采用有损压缩。容许的失真量取决于应用，例如，一些消费型直播应用的用户比电视节目应用的用户能容忍更大的失真。可实现的压缩比可以反映出：可允许/可容忍的失真越大，可使压缩比越高。

视频编码器及解码器可以利用来自数个大类的技术，包括例如运动补偿、变换、量化及熵编码，下面将介绍其中一些技术。

以往，采用上述技术的视频编码常常假设输入内容是单个相机拍摄的。其它输入内容已引起关注，称为立体内容：来自空间对齐的两个相机的相机信号，例如，使两个相机的拍摄轴近似平行，在合适的渲染器中被合并后，在某些条件下观看时可以提供三维图像的错觉。由于这些相机信号高度相关，因此设计了某些视频编码技术，将这两个信号相关联，以获得比对这两个信号单独编码时更高的编码效率。这些技术中的一种被称为多视图编码，在H.264和H.265中以配置文件的形式提供。一些情况下，这种多视图编码可以扩展到对多于两个相机信号的组合编码，同时仍然利用多个相机信号的相似性(如果有的话)。然而，上述意义上的多视图编码仍然在平面相机图像上操作。