[发明专利]一种基于人脸聚类的视频编目方法、检索方法及其系统

摘要

本发明提供一种基于人脸聚类的视频编目方法、检索方法及其系统，方法包括以下步骤：对视频文件进行镜头切分；对视频镜头进行人脸检测，得到人脸图片及相关信息；对检测出的人脸图片进行去重；对去重后的人脸图片进行人脸特征提取，将提取到的人脸特征存入人脸特征库；根据人脸特征，对人脸图片进行特征聚类；对人脸类别库中存储的各个人脸类别进行人工标注；根据人工标注后的人脸类别和类别中人脸的相关信息，自动生成人脸元数据，将所述人脸元数据增加到原始编目文件中，得到最终的视频编目文件。具有以下优点：对视频文件进行自动编目，准确高效，大大节省人力；不需要预制人脸样本库；提供基于人名和图片的视频检索功能，具有检索方便、高效的优点。

主权项

一种基于人脸聚类的视频编目方法，其特征在于，包括以下步骤：S1，接收待编目的视频文件，对所述视频文件进行镜头切分，得到视频镜头序列；S2，对视频镜头序列中的每个视频镜头进行人脸检测，获得每个镜头中出现的各个人物的人脸图片及其相关信息；S3，对检测出的人脸图片进行去重，去除同一个镜头中同一个人重复的人脸图片；S4，对去重后的人脸图片进行人脸特征提取，将提取到的人脸特征存入人脸特征库；S5，根据人脸特征库中存储的人脸特征，对通过S3得到的各张人脸图片进行特征聚类，将同一个人不同镜头或视频片段中得到的人脸图片聚合在同一个人脸类别中，不同人的人脸图片被分配到不同的人脸类别中，将各个人物的人脸类别存储到人脸类别库中；S6，对人脸类别库中存储的各个人脸类别进行人工标注；S7，根据人工标注后的人脸类别和类别中人脸的相关信息，自动生成人脸元数据，将所述人脸元数据增加到原始编目文件中，得到最终的视频编目文件。