[发明专利]通过内容检测、搜索和信息聚集来丰富在线视频

权利要求书

1.一种用于确定关于在线视频的一组附加信息的方法，包括：

接收在线视频；

从所述在线视频中提取一组特征，所述一组特征包括文本特征、视觉特征、音频特征中的至少一个；以及

基于所述一组特征确定一组附加信息。

2.如权利要求1所述的方法，其特征在于，包括：

将所述一组附加信息呈现在显示器上。

3.如权利要求2所述的方法，其特征在于，所述呈现包括以下至少其中之一：

将所述一组附加信息作为视频呈现；

将所述一组附加信息作为动画呈现；

将所述一组附加信息作为图像呈现；以及

将所述一组附加信息作为文本呈现。

4.如权利要求1所述的方法，其特征在于，所述提取包括：

使用OCR文本识别技术提取文本特征。

5.如权利要求1所述的方法，其特征在于，所述提取包括：

使用比例不变特征变换来提取视觉特征。

6.如权利要求1所述的方法，其特征在于，所述视觉特征包括以下至少其中之一：

色彩直方图；

纹理；以及

SIFT描述符。

7.如权利要求1所述的方法，其特征在于，所述确定包括：

使用所述一组特征来对数据库执行多峰相关性匹配算法以确定所述一组附加信息。

8.一种用于确定关于在线视频的一组附加信息的系统，包括：

解析组件，所述解析组件被配置成：

将在线视频解析成一个或多个段，一个段包括一个帧序列；以及

对于各个段，提取代表段的帧序列的一个或多个关键帧；

特征提取组件，所述特征提取组件被配置成：

从各个段的一个或多个关键帧提取一组特征，所述一组特征包括文本特征、视觉特征、音频特征中的至少一个；以及

信息提取组件，所述信息提取组件被配置成：

使用所述一组特征来对数据库执行多峰相关性匹配算法以确定所述一组附加信息。

9.如权利要求8所述的系统，其特征在于，所述信息提取组件被配置成：

将所述一组附加信息聚集到视频中。

10.如权利要求9所述的系统，其特征在于，包括：

呈现组件，所述呈现组件被配置成：

将视频呈现给消费在线视频的用户。

11.如权利要求8所述的系统，其特征在于，包括：

呈现组件，所述呈现组件被配置成：

呈现所述一组附加信息。

12.如权利要求8所述的系统，其特征在于，所述特征提取组件包括：

文本识别组件，所述文本识别组件被配置成使用OCR文本识别技术来提取一个或多个文本特征；

视觉识别组件，所述视觉识别组件被配置成使用比例不变特征变换来提取一个或多个视觉特征；以及

音频识别组件，所述音频识别组件被配置成提取一个或多个音频特征。

13.如权利要求8所述的系统，其特征在于，所述多峰相关性匹配算法被配置成：

使用一个或多个文本特征对所述数据库执行基于文本的搜索算法以确定候选附加信息的第一列表；

使用一个或多个视频特征对所述数据库执行视觉特征匹配算法以确定候选附加信息的第二列表；以及

执行所述第一列表和第二列表的线性组合以生成所述一组附加信息。