[发明专利]视频的图像输出管理方法及装置、传输视频码流的方法

说明书

本发明公开了视频的图像输出管理方法及装置、传输视频码流的方法，其中，视频的图像输出管理方法包括：从码流中确定当前解码的序列的输出延时的帧数D，结合序列的帧率，确定序列的第N个图像输出检测时间点t(N)；N>＝1；令序列下一个要输出的帧的显示顺序POI_output的初始值POI_output_initial等于序列第一帧的显示顺序POI(1)减1；在第N个图像输出检测时间点t(N)；N>＝1；令POI_output＝POI_output_initial+N；如果解码图像缓冲区中显示顺序最小的未输出的帧的显示顺序小于等于POI_output，则输出该图像；否则不输出任何图像。该方法不需要很多语法元素，编码代价低，但是能正确管理跳帧和非跳帧情况下图像输出。

技术领域

本发明属于视频解码技术领域，特别涉及一种视频的图像输出管理方法及装置、传输视频码流的方法。

背景技术

在视频解码的过程中，如何管理解码图像的输出，一直是一个重要的问题，合理的图像输出方法应使得图像按照显示顺序的大小从小到大依次输出，同时还应该在合理的时间输出，即需要使用这一帧的数据的时候再输出。由于实际情况中，解码器解码一帧的时间是无法准确估计的，因此在图像输出管理的方法中，都假设解码器为理想的瞬时解码器。

在H.264和HEVC标准中，图像的输出是由SEI picture timing()中的pic_dpb_output_delay，pic_dpb_output_du_delay以及decoding_unit_info()中的pic_spt_dpb_output_du_delay管理的。三个语法元素都用于表示一个解码图像进入解码图像缓冲区之后经过多少个时钟周期可以输出。通过该管理机制，能使解码图像按照显示顺序，在合理的时间点上输出，但是缺点在于每帧都需要传输一个输出延时，这将会是一个不小的开销。

AVS2的CD文档上也提出一种管理图像输出的方法。将解码图像缓冲区分成参考图像缓冲区和重排序图像缓冲区，其中重排序缓冲区用于存放未输出的帧：

(1)从码流中获取序列输出第一帧时已经解码的帧数output_reorder_delay；

(2)解码完一帧后：如果序列已解码帧数大于output_reorder_delay，则输出重排序图像缓冲区中显示顺序最小一帧

(3)在视频序列结束码之后，依照显示顺序的大小从小到大输出未输出的帧。

该方法的特点为，解码一帧输出一帧，其中当存在解码顺序与显示顺序不一致时，输出的帧并不等于解码的那一帧。当没有发生跳帧时，该方法能很好地管理图像输出。当发生跳帧时这样的输出方式与实际应用不符合。

以图1中的GOP＝8的编码码结构为例，序列的output_reorder_delay＝3：

图2为按照AVS2的CD文档的图像输出方法的输出结果。

由于第9帧其实是没有编码的。输出的时候，必须将第9帧的位置空出来，将B10及显示顺序在其之后的帧都延时1个时间点输出，而不是将B10帧紧接在P8帧之后。

针对H.264，HEVC虽然图像输出管理灵活度高，但编码代价也高以及AVS2虽然编码代价低，但是无法很好地管理跳帧时图像输出的问题。本发明提出一种编码代价低，但是能正确管理跳帧和非跳帧情况下图像输出的方法。

发明内容

针对H.264，HEVC虽然图像输出管理灵活度高，但编码代价也高以及AVS2虽然编码代价低，但是无法很好地管理跳帧时图像输出的问题，本发明提出一种编码代价低，但是能正确管理跳帧和非跳帧情况下图像输出的方法及装置。本发明的第一目的在于提出一种视频的图像输出管理方法，其包括：

(1)从码流中确定当前解码的序列的输出延时的帧数D；