[发明专利]一种电视节目内部自动生成主要人物摘要的方法

摘要

本发明提出一种电视节目内部自动生成主要人物摘要的方法。该法结合视频中图像特征和无监督聚类方法，实现对节目视频主要人物的提取、采访者和受访者的标记，并生成主要人物摘要预览，提升用户体验感。首先基于有标志的视频段落，均匀时间间隔提取关键帧并做人脸检测、特征提取，基于特征对人脸图像进行线性聚类，利用人脸图像的时间信息和空间信息得到粗略的人物类别，再通过基于图论的聚类得到精细的聚类结果，使用自适应的方法过滤出单独段落的主要人物类别，最后综合所有段落过滤结果，二次应用基于图论的聚类，基于规则判断出采访者与受访者，标记并生成各段落主要人物摘要。本发明基于无监督聚类方法，结构简单、易于实现，具有较强的普适性和鲁棒性。

主权项

一种电视节目内部自动生成主要人物摘要的方法，包括对电视节目视频进行镜头切割、关键帧提取、判别有标志的镜头段落和无标志的镜头段落，其特征在于，该方法还包括以下步骤：步骤一，对每个单独的有标志的镜头段落按时间均匀间隔地提取关键帧，对关键帧图像进行人脸检测得到人物人脸图像；步骤二，对人脸图像进行特征提取，再通过基于线性聚类的算法以及基于图论的聚类算法进行人物聚类；步骤三，基于聚类的结果自适应地进行主要人物选取；步骤四，融合上述所有各个单独的有标志镜头段落的主要人物类别，再进行一次基于图论的聚类算法进行人物再聚类；步骤五，对聚类结果中人物类别进行评分，选取出采访者，对采访者和受访者作标记并生成主要人物摘要。