[发明专利]视频摘要自动生成系统及方法

说明书

技术领域

本发明涉及视频处理系统及方法，更具体地说，涉及一种视频摘要自动生成系统及方法。

背景技术

对于信息量较大的网站来说，信息审核工作成了了一个核心工作，整个网站的质量控制就由信息审核部门来进行把握。各个大小规模的网站均不可或缺的需要大量的信息审核人员进行整个网站质量的监控工作，并通过信息审核工作来对整个网站的信息取向起到关键性作用。

然而，通过人工来进行海量的视频信息处理始终是一个不能持久的局面，尤其是在视频审核、视频摘要制作等需要大量处理视频信息的领域。在视频摘要自动生成方面，目前主要有两种生成方式，一是人工截取关键片段形成摘要，二是利用软件按时间间隔截取一系列图像帧形成摘要，前者成本很高，后者效果较差。

发明内容

针对现有技术中存在的视频摘要自动生成成本高、效果差的问题，本发明的目的是提供一种视频摘要自动生成系统及方法。

为实现上述目的，本发明采用如下技术方案：

一种视频摘要自动生成方法，包括以下步骤：基于色彩分布将视频切割成多个镜头或场景；基于色彩分布变化，提取各个镜头或场景中的关键内容；根据先验知识，建立重要度评判模型；根据重要度评判模型对关键内容进行评判，并选择符合条件的关键内容作为摘要元素；将各个摘要元素组合形成视频摘要。

根据本发明的一实施例，关键内容包括关键帧、场景或字幕。

根据本发明的一实施例，基于色彩分布变化的提取步骤进一步包括：提取连续的两个视频帧；计算连续两个视频帧之间的色彩分布差：其中，函数f为视频帧的色彩分布函数，f₁和f₂分别代表连续的两个视频帧；i为色彩分量，从0到255取值。

根据本发明的一实施例，基于色彩分布变化的提取步骤进一步包括：基于色彩分布差，计算每一帧的色彩分布变化增量：其中，f_k(i)和f_k-1(i-1)分别代表连续的两个视频帧。

为实现上述目的，本发明还采用如下技术方案：

一种视频摘要自动生成系统，包括视频切割模块、视频提取模块、重要度评判模型、摘要生成模块。视频切割模块基于色彩分布将视频切割成多个镜头或场景，视频提取模块基于色彩分布变化来提取各个镜头或场景中的关键内容；重要度评判模型对关键内容进行评判，并选择符合条件的关键内容作为摘要元素；摘要生成模块将各个摘要元素组合形成视频摘要。

根据本发明的一实施例，关键内容包括关键帧、场景或字幕。

根据本发明的一实施例，视频提取模块首先提取连续的两个视频帧，再计算连续两个视频帧之间的色彩分布差：其中，函数f为视频帧的色彩分布函数，f₁和f₂分别代表连续的两个视频帧；i为色彩分量，从0到255取值。

根据本发明的一实施例，视频提取模块基于色彩分布差，计算每一帧的色彩分布变化增量：其中，f_k(i)和f_k-1(i-1)分别代表连续的两个视频帧。

在上述技术方案中，本发明的视频摘要自动生成系统及方法在视频处理领域内，能够有能力快速处理海量视频内容，生成和发布视频摘要，实 现视频摘要的快速、准确、自动化生成，成本较低但效果较好。

附图说明

图1是本发明视频摘要自动生成方法的流程图。

具体实施方式

下面结合附图和实施例进一步说明本发明的技术方案。

参照图1，本发明的总体思路是：首先采用视频镜头切分方法，获得适配的视频镜头/场景，进而提取多种视频内容信息并通过融合处理，获得关键场景帧，在此基础上进行重要度评判的研究，筛选出最终所需的关键场景帧，以合成视频摘要。

根据上述总体思路，本发明公开一种视频摘要自动生成系统及其对应的方法，如图1所示，其主要包括视频切割模块、视频提取模块、重要度评判模型、摘要生成模块。下面来详细说明上述各个模块的作用及其对应适用的方法。

S1：视频切割模块基于色彩分布将视频切割成多个镜头或场景。视频切割模块通过对视频整体特征的分析，自动确定镜头切分的相关参数，并针对镜头切换的不同形式，分别采用不同的镜头边界检测方法，对于突变型镜头边界将采用基于象素和直方图的检测方法，而对于渐变镜头边界将采用基于模型的检测方法。