[发明专利]基于内容的视频检测方法及装置

权利要求书

1.一种基于内容的视频检测方法，其特征在于，预先建立包括音频特征和图像特征的模板库；该方法还包括：

对待测视频节目进行音频解码并提取音频特征，将提取的音频特征与模板库中的音频特征进行匹配，确定目标片段出现的候选区域；

对所述候选区域进行图像解码并提取图像特征，将提取的图像特征与模板库中的图像特征进行匹配，确定目标片段的边界。

2.如权利要求1所述的方法，其特征在于，所述模板库的建立方法，具体包括：

从视频节目样本中切分目标片段，并从切分出的目标片段中提取音频特征和图像特征，建立模板库。

3.如权利要求2所述的方法，所述从视频节目样本中切分目标片段，包括：

如果待切分的目标片段的起始帧是全帧压缩编码帧I帧，从该帧开始切分；

如果待切分的目标片段的起始帧是前向预测编码帧P帧或双向预测内插编码帧B帧，从该帧之前最邻近的一个I帧开始切分，并记录所述P帧或B帧到所述最邻近的一个I帧的时间偏移量。

4.如权利要求3所述的方法，其特征在于，所述从切分出的目标片段中提取音频特征和图像特征时，从切分出的目标片段的实际起始帧开始提取。

5.如权利要求2至4任一项所述的方法，其特征在于，先将视频节目样本中的帧按照时间戳重新排序，然后再从视频节目样本中切分目标片段。

6.如权利要求1所述的方法，其特征在于，还包括：利用确定出边界的目标片段，更新所述模板库。

7.如权利要求6所述的方法，其特征在于，所述更新模板库，具体包括：

在确定出边界的一组目标片段中，如果包含当前未确定为目标片段的视频节目片段，当该视频节目片段符合设定条件时，提取该视频节目片段的音频特征和图像特征并存入模板库。

8.如权利要求6或7所述的方法，其特征在于，所述更新模板库，具体包括：

扩展确定出边界的一组目标片段的两端；

提取扩展出的视频节目片段的音频特征和图像特征并缓存；

当在重复模式检测中利用缓存的音频特征和图像特征再次检测到扩展出的视频节目片段时，将缓存中发生重复的视频节目片段的音频特征和图像特征存入模板库。

9.如权利要求6至8任一项所述的方法，其特征在于，所述更新模板库，具体包括：

监视模板库中的每一个目标片段最近一次被检测到的日期，将设定时间长度内未被检测到的目标片段的音频特征和图像特征从模板库中删除。

10.如权利要求1所述的方法，其特征在于，所述确定目标片段出现的候选区域，具体包括：

合并所述与模板库中的音频特征进行匹配后得到的相邻的匹配片段、和/或时间间隔小于设定阈值的不相邻的匹配片段；

扩展每个合并后的片段，作为一个候选区域。

11.如权利要求1、2或10所述的方法，其特征在于，所述提取音频特征，具体包括：

通过预处理得到音频帧的能量包络；

将所述能量包络切分为能量包络单元；

提取各个能量包络单元的切分点的位置及概率值并生成数对序列，作为所述音频特征。

12.如权利要求11所述的方法，其特征在于，所述将所述能量包络切分为能量包络单元，具体包括：

求取每个音频帧的检测函数；

在每一个设定局部区域中选择所述检测函数的最大值，作为局部极大值点；

将每一个局部极大值点与设定的上阈值及下阈值比较，根据比较结果得到该局部极大值点被检测为切分点的概率值；

根据所述概率值，从所述局部极大值点中选择出切分点，根据所述切分点将所述能量包络切分为能量包络单元。