[发明专利]基于内容的视频检测方法及装置

说明书

 

技术领域

本发明涉及视频识别技术领域，特别涉及基于内容的视频检测方法及装置。

 

背景技术

随着新媒体业务的不断铺开，基于内容的视频检测得到了越来越广泛的应用，即从一段视频中，检测出需要的目标片断。广告检测就是基于内容的视频检测的一种典型应用。

下面以广告检测为例，简要介绍已有的基于内容的视频检测方法。在广告检测中，目标片段就是广告片段。

目前，电视节目的传播渠道由单一的电视广播延伸至互联网、手机、IPTV等多种收视终端，同时，用户的收看方式也由被动收看转为主动点播，对节目内容的精细度提出了更高的要求。

考虑上述两方面因素，需要对原始的电视节目进行编目，如：节目分段、广告剔除和建立索引等。通过上述编目，将原始的电视节目转变为符合新媒体业务要求的节目源。

在传统的视频编目平台上，采用人工方式清除节目前后和节目中间插播的广告片段，由于广告片段的播出时间短、数量大，和新闻、电视剧等其他类型节目相比，比较零碎，因此这种人工方式的效率很低。

电视广告的特点是每天在固定的频道的多个时间段重复播放，并且播出的内容（音频和图像）完全相同。广告检测技术正是利用这一特点，采用复制检测领域中的成熟算法，达到检测的目的。目前的广告检测算法分为以下两大类：

1、基于学习的算法。此类算法首先对待测视频节目进行镜头分割，然后对分割出的视频片段进行分类，判断该视频片段是广告片段还是普通视频片段。在上述分类时，既可利用广告片段的自身特征，也可利用广告片段的上下文信息。

2、基于识别的算法。此类算法需要预先建立广告库。在进行广告检测时，从待测视频节目中提取特征序列，通过与广告库中的特征序列进行匹配，识别广告片段并确定其边界。这里的边界指广告片段的起止时刻。

上述基于学习的算法漏检和错检较多，且检测出的广告片段的边界不准确，而基于识别的算法可以比较准确的确定出广告片段的边界，但检测精度和处理速度都有待提高。

 

发明内容

有鉴于此，本发明的目的是提供基于内容的视频检测方法及装置，能够利用基于识别的算法，既快速又准确的检测出目标片段的边界。

为了对披露的实施例的一些方面有一个基本的理解，下面给出了简单的概括。该概括部分不是泛泛评述，也不是要确定关键／重要组成元素或描绘这些实施例的保护范围。其唯一目的是用简单的形式呈现一些概念，以此作为后面的详细说明的序言。

本发明的技术方案是这样实现的：

一种基于内容的视频检测方法，预先建立包括音频特征和图像特征的模板库；该方法还包括：

对待测视频节目进行音频解码并提取音频特征，将提取的音频特征与模板库中的音频特征进行匹配，确定目标片段出现的候选区域；

对所述候选区域进行图像解码并提取图像特征，将提取的图像特征与模板库中的图像特征进行匹配，确定目标片段的边界。

可选的，所述模板库的建立方法，具体包括：

从视频节目样本中切分目标片段，并从切分出的目标片段中提取音频特征和图像特征，建立模板库。

可选的，所述从视频节目样本中切分目标片段，包括：

如果待切分的目标片段的起始帧是全帧压缩编码帧I帧，从该帧开始切分；

如果待切分的目标片段的起始帧是前向预测编码帧P帧或双向预测内插编码帧B帧，从该帧之前最邻近的一个I帧开始切分，并记录所述P帧或B帧到所述最邻近的一个I帧的时间偏移量。

可选的，所述从切分出的目标片段中提取音频特征和图像特征时，从切分出的目标片段的实际起始帧开始提取。

可选的，其特征在于，先将视频节目样本中的帧按照时间戳重新排序，然后再从视频节目样本中切分目标片段。

可选的，还包括：利用确定出边界的目标片段，更新所述模板库。

可选的，所述更新模板库，具体包括：

在确定出边界的一组目标片段中，如果包含当前未确定为目标片段的视频节目片段，当该视频节目片段符合设定条件时，提取该视频节目片段的音频特征和图像特征并存入模板库。

可选的，所述更新模板库，具体包括：

扩展确定出边界的一组目标片段的两端；

提取扩展出的视频节目片段的音频特征和图像特征并缓存；