[发明专利]确定视频卡顿的方法及装置

说明书

本发明公开了一种确定视频卡顿的方法及装置，属于多媒体技术领域。该方法包括：从音视频数据中分离出视频数据；将预先存储的参考图像的图像信息封装到视频数据中，得到封装后的视频数据；在指定区域内显示封装后的视频数据的过程中，采集图像数据，并记录图像数据的第一采集时间；根据图像数据和图像数据的第一采集时间，确定播放的视频是否卡顿。本发明通过将参考图像的图像信息封装到视频数据中，并在显示视频数据的过程中，采集图像数据并记录图像数据的采集时间，进而基于图像数据和采集时间，确定视频数据是否卡顿。该过程无需检测音视频缓存队列，借助当前播放的视频数据进行确定，确定结果更为准确、实时性更强。

技术领域

本发明涉及多媒体技术领域，特别涉及一种确定视频卡顿的方法及装置。

背景技术

卡顿是视频播放过程中经常遇到的问题，当播放的视频卡顿后，用户将无法流畅地观看视频，这不仅极大地影响了用户的观感，而且降低了用户对直播平台的粘性。为了改善用户的观感，增加用户对直播平台的粘性，可在视频播放过程中，需要确定播放的视频是否卡顿，进而及时调整视频数据的发送策略。

现有技术主要基于Flash播放组件中的音视频缓存队列，确定播放的视频是否卡顿，具体确定过程为：在视频播放过程中，检测音视频缓存队列是否为空，如果音视频缓存队列为空，则确定播放的视频卡顿；如果音视频缓存队列为非空，则确定播放的视频未卡顿。

在实现本发明的过程中，发明人发现现有技术至少存在以下问题：

通常音视频缓存队列不仅可缓存视频数据，而且还可缓存音频数据，当音视频缓存队列中只缓存音频数据未缓存视频数据时，由于音视频缓存队列为非空，现有技术确定播放的视频未卡顿，而实际上播放的视频已卡顿，因此，现有技术的确定结果并不准确。

发明内容

为了解决现有技术的问题，本发明实施例提供了一种确定视频数据卡顿的方法及装置。所述技术方案如下：

一方面，提供了一种确定视频数据卡顿的方法，所述方法包括：

当接收到音视频数据时，从所述音视频数据中分离出视频数据；

将预先存储的参考图像的图像信息封装到所述视频数据中，得到封装后的视频数据；

基于与第一显示组件绑定的播放组件，在指定区域内显示所述封装后的视频数据的过程中，采集图像数据，并记录所述图像数据的第一采集时间；

根据所述图像数据和所述图像数据的第一采集时间，确定播放的视频是否卡顿。

在本发明的另一个实施例中，所述将预先存储的参考图像的图像信息封装到所述视频数据中，得到封装后的视频数据之前，所述方法还包括：

预先编码两帧参考图像，所述两帧图像包括红色参考图像和绿色参考图像；

获取所述两帧图像的序列参数集和图像参数集；

将所述序列参数集、所述图像参考集、以及所述两帧参考图像的编码帧作为所述参考图像的图像信息。

在本发明的另一个实施例中，所述将预先存储的参考图像的图像信息封装到所述视频数据中，得到封装后的视频数据，包括：

确定所述视频数据的帧类型；

如果所述视频数据的帧类型为视频头帧，则将所述序列参数集、所述图像参数集封装到所述视频数据中，得到所述封装后的视频数据；

如果所述视频数据的帧类型为视频图像帧，根据所述视频数据在已接收视频数据总数中的奇偶属性，从所述两帧参考图像的编码帧中，选取目标编码帧，并将所述目标编码帧封装到所述视频数据中，得到所述封装后的视频数据。