[发明专利]主动式视频浓缩装置及方法

说明书

技术领域

本发明涉及一种视频处理技术，具体涉及一种视频浓缩（即生成视频摘要）的技术。

背景技术

在社会公共安全领域，视频监控系统成为维护社会治安，加强社会管理的一个重要组成部分。然而视频录像存在存储数据量大，存储时间长等特点，通过录像寻找线索，获取证据传统的做法是要耗费大量人力、物力以及时间，效率极其低下，以至于错过最佳破案时机。

视频摘要是对视频内容的一个简单概括，以自动或半自动的方式，先通过运动目标分析，提取运动目标，然后对各个目标的运动轨迹进行分析，将不同的目标重组并拼接到共同的背景场景中，形成视频。因此在视频监控系统中，人们可以通过视频摘要快速浏览，锁定检索对象，对于公安加快破案速度，提高大案、要案的破案效率具有重要指导意义。

视频媒体的无结构性是阻碍新一代视频应用的瓶颈问题，为了解决视频的无结构性问题，研究者提出了视频结构化描述的技术途径。视频结构化描述技术包含两层含义：对视频中目标特征的识别和提取形成描述信息文本，基于描述信息实现视频内容检索与数据挖掘。

传统的生成视频摘要的技术主要有两种：第一种方法是基于视频关键帧的视频摘要，此方法首先获取视频的关键帧，然后通过分级聚类的方法检测视频片段的相似度，将相似度超过阈值的片段去除，将保留下来的部分拼接成视频摘要；另一种方法是基于视频特征的视频摘要，此方法是根据提取的输入视频的特征，计算视频的精彩度，并将精彩度较高的精彩镜头通过简单地拼接，形成视频摘要。

但是这两种方法所形成的视频摘要都无法满足用户获取特定目标的信息的要求。并且这两种方法都是由视频片段拼接起来的，仍存在时长较长、运动不紧凑的问题。

发明内容

针对上述现有技术，本发明的目的在于提供一种主动式视频浓缩方案，用于解决现有的视频摘要方法无法满足用户对指定特定目标生成摘要视频的需求，以及传统技术所产生的摘要视频时长较长、运动不紧凑的问题。

为了达到上述目的，本发明采用如下的技术方案：

一种主动式视频浓缩装置，所述装置包括：

视频结构化描述模块，所述视频结构化描述模块用于对输入视频进行分析，生成视频结构化描述文件；

存储管理模块，所述存储管理模块用于储存及管理视频结构化描述文件，并根据视频结构化描述文件建立的数据库；

检索模块，所述检索模块对存储管理模块中的视频结构化描述文件进行检索，并将检索结果按照其相关度排序；

视频浓缩摘要模块，所述视频浓缩摘要模块用于生成符合检索条件的摘要视频，在不丢失运动目标并且不重叠或没有严重重叠前提下，将不同时间段出现的运动目标平移到同一时间段，浓缩为摘要视频。

在浓缩装置的优选实例中，所述视频结构化描述模块生成的视频结构化描述文件包括目标特征描述文件和目标轨迹描述文件，所述目标特征描述文件包含每个目标的描述信息；所述目标轨迹描述文件包含每个目标轨迹的基本信息。

进一步的，所述存储管理模块通过视频结构化描述文件中的目标特征描述文件建立相关的数据库，同时由数据库管理目标特征描述文件的所有信息。

进一步的，所述视频浓缩摘要模块在生成摘要视频时，根据目标轨迹描述文件提供轨迹对应的前景矩形序列的空间位置和时间信息，确保运动目标平移后不重叠或没有严重重叠。

进一步的，所述视频浓缩摘要模块在生成摘要视频时，对运动目标的平移是指对运动目标的时间的平移。

进一步的，所述视频浓缩摘要模块在生成摘要视频时，对于多个目标轨迹相互重叠的区域以透明贴图的形式确保每个目标都可见；同时对摘要视频中的每个目标标注其原始的时间戳和前景矩形，并实现了视频索引功能，点击运动目标即可跳转至对应的原始视频片段。

一种主动式视频浓缩的方法，该方法包括如下步骤：

（1）对输入视频进行分析，生成视频结构化描述文件，并根据生成的结构化描述文件建立相关数据库；

（2）对建立的数据库进行检索，并将检索结果按照相关度排序；

（3）根据步骤（2）检索结果，对目标轨迹筛选及重排，在确保运动目标平移后不重叠或没有严重重叠的前提下，将不同时间段出现的运动目标平移到同一时间段，浓缩为摘要视频。

在该方法的优选方案中，所述步骤（1）中生成的视频结构化描述文件具体包括：目标特征描述文件和目标轨迹描述文件，所述目标特征描述文件包含每个目标的描述信息，所述目标轨迹描述文件包含每个目标的基本信息。