[发明专利]概括视频内容

权利要求书

1.一种用于自动提取视频内容概要的方法，包括：

由数据处理系统从视频数据库访问包括第一多个帧的第一视频内容元素；

由所述数据处理系统通过对第一视频内容元素进行时间上降采样选择第一视频内容元素的第一多个帧的区间子集；

由所述数据处理系统为包括来自所述区间子集的预定数量的帧的多个进一步子集中的每一个计算所述进一步子集的分数；

由所述数据处理系统从所述多个进一步子集中识别具有最高分数的进一步子集；

由所述数据处理系统选择包括具有最高分数的进一步子集的帧的第一视频内容元素的一部分；以及

由所述数据处理系统生成包括第一视频内容元素的所选择的部分的第二视频内容元素，通过：

基于帧之间的第一颜色变化来检测与第一视频内容元素的所选择的部分相对应的帧当中的初始镜头边界帧；

基于帧之间的第二颜色变化来检测与第一视频内容元素的所选择的部分相对应的帧当中的结束镜头边界帧，第二颜色变化在第一颜色变化之后；

截断第一视频内容元素的所选择的部分的初始帧和初始镜头边界帧之间的第一视频内容元素的第一子部分；以及

截断结束镜头边界帧和第一视频内容元素的所选择的部分的结束帧之间的第一视频内容元素的第二子部分。

2.根据权利要求1所述的方法，其中，计算所述进一步子集的分数还包括：

计算所述进一步子集和正样本图像集之间的第一距离度量；

计算所述进一步子集和负样本图像集之间的第二距离度量；以及

基于第一距离度量和第二距离度量的组合来计算所述进一步子集的分数。

3.根据权利要求1所述的方法，其中，计算所述进一步子集的分数还包括：

使用图像识别算法来检测来自所述进一步子集的对象；

使用图像识别算法来识别从所述进一步子集检测到的对象的一个或多个属性；以及

基于从所述对象识别的一个或多个属性来计算所述进一步子集的分数。

4.根据权利要求1所述的方法，其中，计算所述进一步子集的分数还包括：

通过将运动检测算法应用于两个对应帧来在所述进一步子集的每个帧之间计算运动度量；以及

基于在所述进一步子集的每个帧之间计算的运动度量的集来计算所述进一步子集的分数。

5.根据权利要求1所述的方法，其中，计算所述进一步子集的分数还包括：

确定所述进一步子集的帧的多个像素之间的颜色分布；以及

基于所述进一步子集的帧的多个像素之间的颜色分布来计算所述进一步子集的分数。

6.根据权利要求1所述的方法，其中，计算所述进一步子集的分数还包括：

通过将对应数量的图像分析算法应用于所述进一步子集的帧来为多个进一步子集的每一个计算多个分数；以及

基于所述多个分数的预定加权平均值来计算分数。

7.根据权利要求1所述的方法，其中，选择第一视频内容元素的一部分还包括：

识别与具有最高分数的进一步子集的第二初始帧相对应的第一视频内容元素的第一初始帧；

识别与具有最高分数的进一步子集的第二结束帧相对应的第一视频内容元素的第一结束帧；以及

从第一初始帧到第一结束帧选择第一视频内容元素的帧子集。

8.根据权利要求1所述的方法，其中，计算所述进一步子集的分数还包括计算包括一个帧的进一步子集的分数；

其中，生成第二视频内容元素还包括生成包括来自多个帧中的一个帧的第二视频内容元素。

9.根据权利要求1所述的方法，还包括：

由所述数据处理系统使用图像识别算法从包括对象的第一多个帧中识别连续帧的第二子集；以及

由所述数据处理系统将连续帧的第二子集连接到第二视频内容元素。