[发明专利]视频数据流的编码、解码、传输方法以及编码器、解码器

说明书

在允许诸如MANE或解码器的网络实体容易存取的层级上在视频数据流内传达解码器撷取时序信息、ROI信息及图块识别信息。为达到此层级，藉由穿插在视频数据流的存取单元的封包中的封包，在视频数据流内传达此等类型的信息。根据一实施例，穿插式封包为能移除式封包类型，即，此等穿插式封包的移除维持解码器完全复原经由视频数据流所传达的视频内容的能力。

技术领域

本申请案关于视频数据流概念技术，特定言之，该等概念技术在低延迟应用方面是有利的。

背景技术

HEVC[2]允许向应用层进行高阶语法发信号的不同手段。此等手段系NAL单元标头、参数集及补充增强信息(SEI)讯息。在解码过程中不使用SEI讯息。高阶语法发信号的其他手段源自于个别传输协议规定，诸如 MPEG2传输协议[3]或实时传输协议[4]，及其有效负载特殊规定，例如对于H.264/AVC[5]、可缩放视频编码(SVC)[6]或HEVC[7]的建议。此等传输协议可介绍高阶发信号，其所使用的结构及机构与个别应用层编码解码器规定(例如HEVC[2])之高阶发信号类似。此发信号的一实例为如[6]中所描述的有效负载内容可缩放性信息(PACSI)NAL单元，其为传输层提供补充信息。

HEVC[2]允许向应用层进行高阶语法发信号的不同手段。此等手段系NAL单元标头、参数集及补充增强信息(SEI)讯息。在解码过程中不使用SEI讯息。高阶语法发信号的其他手段源自于个别传输协议规定，诸如 MPEG2传输协议[3]或实时传输协议[4]，及其有效负载特殊规定，例如对于H.264/AVC[5]、可缩放视频编码(SVC)[6]或HEVC[7]的建议。此等传输协议可介绍高阶发信号，其所使用的结构及机构与个别应用层编码解码器规定(例如HEVC[2])之高阶发信号类似。此发信号的一实例为如[6]中所描述的有效负载内容可缩放性信息(PACSI)NAL单元，其为传输层提供补充信息。

就参数集而言，HEVC包括视频参数集(VPS)，该参数集在单个及中央位置编译将由应用层使用之最重要的流信息。在较早的方法中，需要自多个参数集及NAL单元标头收集此信息。

在本申请案之前，关于假想参考解码器(HRD)的已编码图像缓冲器 (CPB)操作之标准的状态，以及在序列参数集(SPS)/视频可用性信息(VUI)、图像时序SEI、缓冲周期SEI以及解码单元之定义(其描述子图像及如片段标头以及图像参数集(PPS)中所呈现的相依性片段的语法)中提供的所有相关语法如下。

为了允许子图像层级上的低延迟CPB操作，已提议子图像CPB操作并且将其并入HEVC标准草案7JCTVC-I1003[2]中。尤其在此处，在[2] 的第3章节中已将解码单元定义为：

解码单元:存取单元或存取单元的子集。若SubPicCpbFlag等于0，则解码单元系存取单元。否则，解码单元由存取单元中的一或多个VCL NAL 单元及相关非VCL NAL单元组成。就存取单元中的第一个VCL NAL单元而言，相关非VCL NAL单元系紧接在第一个VCL NAL单元之后的填充符数据NAL单元(若存在)以及在该存取单元中位于第一个VCL NAL单元之前的所有非VCL NAL单元。就并非存取单元中的第一个VCL NAL单元之 VCL NAL单元而言，相关非VCL NAL单元系紧接在该VCL NAL单元之后的填充符数据NAL单元(若存在)。

到那时为止已定义的标准中，已描述「解码单元移除时序及解码单元解码」。为了用信号发出子图像时序，已扩展缓冲周期SEI讯息及图像时序SEI讯息以及VUI中的HRD参数来支持解码单元，如子图像单元。

[2]的缓冲周期SEI讯息语法展示于图1中。

当NalHrdBpPresentFlag或VclHrdBpPresentFlag等于1时，缓冲周期 SEI讯息可与位流中的任何存取单元相关，且缓冲周期SEI讯息将与每一 RAP存取单元及关联于恢复点SEI讯息的每一存取单元相关。

对于一些应用，缓冲周期SEI讯息的频繁出现可能是理想的。