[发明专利]一种多视点立体视频分层编码方法和解码方法

说明书

本发明提供了一种多视点立体视频分层编码方法和解码方法，其可以使解码端在进行解码时方便地抽取码流的一部分进行解码，从而实现反向兼容。

技术领域

本发明涉及一种多视点立体视频分层编码方法解码方法，特别是涉及一种将包含多个视点和/或深度的视频数据编码成一个包含多个层次的码流的方法。

背景技术

最新的视频编码标准H.265把包含多个视点(可能含深度)的音视频节目编码成包含多个层次的码流。包含多个层次的码流结构最初是由MPEG-2定义的，后来MPEG-4和H.264标准都继承了分层的结构。但是MPEG-2以及MPEG-4、H.264的分层方式仅限于传统的可分层编码(scalable coding)，具体地说，包括时间分层、空间分层和质量分层等三种分层方式。H.265在设计包含多个视点视频的编码码流结构时，扩展了分层的概念，使分层的方式不仅可以是传统的三种方式，也可以按照视点、纹理/深度分层。

H.265的码流结构是在H.264的码流结构的基础上扩展的。分层信息包含在NAL包的头部中，采用固定的16位长度。这样解析起来很方便，但是16位能够描述的信息是比较少的，一个解码器要想更清楚的了解每个层次的信息，以便能够做出选择，选择一部分层次来解码，必须去进一步解析相应层次的SPS。这样一来就不方便了。同时，解码器在选择部分层次进行解码时，又必须了解每个层次的更多信息。

多层次码流设计的另一个目的是实现后向兼容。就是多视点视频的编码码流能够被单视点的解码器解码，立体视频的编码码流能够被平面视频的解码器解码，类似于黑白电视机能够接收彩色电视信号，这种兼容我们‘反向兼容’。相应的‘正向兼容’是指新的设备可以处理老格式的输入信号，例如彩色电视机可以接收黑白电视信号。

AVS2在设计多视点视频编码码流和3D视频编码码流时，也遇到了类似的问题。而且，AVS2还遇到一个特殊的问题，即AVS2的多视点视频编码码流和3D视频编码码流必须在AVS2的基准码流结构之上进行扩展，而AVS2的基准码流结构是沿用了AVS1的码流结构，和H.265是完全不同的。

发明内容

为克服上述现有技术存在的不足，本发明之目的在于提供一种多视点视频和立体视频的编码方法解码方法，其可以使解码端在进行解码时方便地抽取码流的一部分进行解码，从而实现反向兼容。

本发明提供一种多视点立体视频分层编码方法，包括：

步骤一：将输入的多视点视频或立体视频数据按照视点和数据类型分成若干原始数据层；

步骤二：选择其中一个原始数据层，作为基准层，并用AVS2基准档次的编码方法进行编码；生成的码流作为基准层码流；

步骤三：依次编码剩余的原始数据层，编码时使用编码增强层的方法；并且在对视频图像的显示顺序进行编号时，要与基准层码流一致；对视频图像的编码顺序也要和基准层码流一致；编码生成的码流作为增强层码流；

步骤四：在增强层码流的每个视频序列头和其后的第一个视频图像头之间，插入码流分层信息描述表；

步骤五：将每个增强层码流中的每个数据块重新打包，形成重新打包的增强层数据块；

步骤六：将每个增强层码流中的每个重新打包的数据块按照编码顺序依次插入到基准层码流对应的图像编码数据的后面，所述对应的图像是指编码顺序相同的图像；增强层码流中的视频序列头和各种扩展数据、用户数据的编码顺序是与其后出现的第一个图像的编码顺序相同。

进一步的，在所述的多视点立体视频分层编码方法中，在步骤一中，所述原始数据层是其中某个视点的纹理数据或某个视点的深度数据。

进一步的，在所述的多视点立体视频分层编码方法中，所述纹理数据包含相应视点的所有采样点的颜色信息。