[发明专利]同步音频帧与视频帧

说明书

技术领域

本发明涉及显现音频与视频信息。

背景技术

音频与视频信息可通过使用显现时间戳在输出装置上显现。显现 时间戳可为每个音频和视频帧提供。因此，在当前时间等于适当的显 现时间戳时间时，可显示音频数据或视频帧序列。

显现时间戳嵌在编码内容内。音频和视频呈现器在适当的时间将 音频和视频帧显现到输出显示装置。

发明内容

本发明的第一方面在于一种方法，包括：使用时间戳同步音频和 视频帧；确定自最后视频帧显现后某个时间段是否已经过；以及如果 已经过，则自动显示要显示的下一视频帧。

本发明的第二方面在于一种计算机可读媒体，所述媒体存储有可 由计算机执行的指令以便：使用时间戳同步音频和视频帧；确定自最 后视频帧显现后某个时间段是否已经过；以及如果已经过，则显示要 显示的视频帧序列中的下一视频帧。

本发明的第三方面在于一种设备，包括：解码器；以及呈现器， 所述呈现器耦合到所述解码器以使用时间戳同步音频和视频帧，确定 自所述呈现器显现前一视频帧后某个时间段是否已经过，并且如果已 经过，则显示下一视频帧。

本发明的第四方面在于一种系统，包括：解码器；耦合到所述解 码器的呈现器；耦合到所述呈现器的显示器；以及所述呈现器显现用 于使用时间戳在所述显示器上显示的音频和视频信息帧，所述呈现器 确定自最后视频帧显现后某个时间段是否已经过，并且如果已经过， 则自动显示要显示的下一视频帧。

附图说明

图1是本发明的一个实施例的系统图示；

图2是根据一些实施例，用于显现视频帧和音频数据的计时图； 以及

图3是根据一些实施例，用于同步音频数据和视频帧的顺序的流 程图。

具体实施方式

音频与视频帧显现之间的同步对获得增强的用户体验很重要。音 频和视频帧不同步时会发生失常。例如，观看者可能看到说话者的嘴 唇在动，但可认识到音频已经播放或者仍未播放。

显现时间戳嵌在称为分包基本流的编码内容内。显现时间戳放置 在分组报头中以指示一部分的部分解码音频或视频数据要向观看者 显现的确切时间。编码内容可以是任何类型的音频和视频材料，包括 电影、游戏或其它图形。呈现器(renderer)是决定何时音频或视频发送 到输出装置的任何组件。输出装置可以是电视、监视器、音频/视频接 收器或计算机显示器，这里只列出一些示例。

通常，内容包含时间上相互接近的初始音频和视频显现时间戳。 第一视频帧在启动后很快显示，并且可接近第一呈现音频样本，由此 保持音频/视觉同步。实际时间可取决于内容和使用的软件与硬件。

然而，一些情况下，内容可不遵循此顺序。内容可编码以便例如 第一视频显现时间戳在第一音频显现时间戳后某个时间出现。此类情 况下，用户在第一视频帧之前听到几秒钟音频。在因特网协议流传送 中，这可使信道变化时间对最终用户来说似乎比所需更长。

因此，参照图2，线条32示出增大的时间单元。线条34示出音 频显现时间戳，并且指示在一个实施例中何时呈现样本。线条36示 出与每个时间单元和音频显现时间戳同步的视频显现时间戳和帧标 识符。在线条38中所示的音频/视频同步点(A/V同步点)是即时的，并 且之后的每个帧具有音频与视频之间的同步。

在另一实施例中，线条40示出音频显现时间戳和呈现音频样本的 时间，该时间在此情况下对应于每个时间单元。线条42示出视频显 现时间戳和帧标识符，并且在此情况下，第一视频显现时间戳到时间 单元5才出现。

因此，如果严格遵从显现时间戳，则音频将在视频之前开始。如 线条44中所示，音频/视频(A/V)同步点到时间单元5才出现，并且在 此示例中，在该点之后音频和视频同步。对于时间单元1-4，在此示 例中将有音频但无视频，这可能是不需要的用户体验。

参照图1，音频视频显现系统10可在解码器12接收音频/视频(A/V) 流。在一个实施例中，系统是使用芯片上的系统实现的消费电子装置。 解码器12将帧序列的任何编码或压缩解码，并向呈现器14提供帧显 现时间戳和帧。解码器12可从流中的分组去除报头，并提取音频和 视频显现时间戳。解码器12也可从流中去除音频和视频帧。