[发明专利]视觉屏蔽双层AP视频摘要生成方法

说明书

本发明公开一种视觉屏蔽双层AP视频摘要生成方法，首先，利用压缩感知技术得到压缩之后的视频，使视频具有视觉屏蔽的效果以保护被监控对象隐私，同时数据量大大缩小；然后，对压缩后的视频提取PHOG特征，对得到的特征经过第一步AP聚类，得到第一阶段的视频摘要；最后，我们对第一阶段的关键帧提取PHOG和Hist融合特征，将融合后的PHOG‑Hist特征进行第二步AP聚类，得到最终的视频摘要。本发明在保护被监控对象隐私的同时大大降低数据量，实现了快速提取关键帧同时兼顾安全监控与隐私保护，具有冗余度低和漏帧少的优势，且计算复杂度低，实时性强，对视觉屏蔽后的视频具有鲁棒性优势。

技术领域

本发明属于图像处理技术领域，具体涉及一种视觉屏蔽双层AP视频摘要生成方法。

背景技术

近年来，多媒体技术、计算机网络发展迅猛，信息化程度不断提高，传统的信息检索系统己经无法处理这些数量巨大且迅速增长的媒体数据，因此人们迫切需要一种新的自动化的方法来处理、分析和检索网上海量的多媒体数据，尤其是视频数据。视频的流媒体特性使其在处理、分析和内容理解上是最具挑战性的数据类型，基于关键帧提取视频摘要是获取视频基本内容的途径之一。视频的关键帧提取就是用尽可能少的静态图像来最大化地表示出原始视频的主要内容，该主要内容既可以是用户需要重点关注的视频内容，也可以是视频内容前后发生明显变化的部分。视频数据的这种摘要形式可以节省更多的存储空间和阅览时间，这在视频分析、视频压缩和视频检索等许多其他应用中有非常重要的作用。

随着智能家居的兴起与4G、光纤等网络带宽速度的大幅度提高，视频图像的数据量呈几何级的增长态势，针对视频数据，如何对其进行索引从而最终快速准确的进行检索成为迫切的需求。而对于类似于居家环境或网约车等公共场所的监控，不论是被监控的老人或小孩，还是网约车的司机或乘客，都不愿意自己的行为被完全地暴露在监控的视频中，因此，我们在保护被监控对象的人身安全的同时，还要保护被监控对象的隐私。如何做到快速提取关键帧，同时兼顾安全监控与隐私保护，现有的视频摘要技术并没有有效的解决方案。

发明内容

本发明的目的是针对现有技术存在的问题，提供一种视觉屏蔽双层AP视频摘要生成方法，解决部分涉及隐私保护场景下的视频的关键帧提取问题，该方法将视频经过压缩感知技术得到压缩之后的视频，使视频具有视觉屏蔽的效果，以达到保护被监控对象隐私的目的，同时数据量大大缩小，通过双层吸引子传播算法的应用，使得提出的关键帧提取方法具有冗余度低和漏帧少的优势，且计算复杂度低，实时性强，对视觉屏蔽后的视频具有鲁棒性优势。

为实现上述目的，本发明采用的技术方案是：

视觉屏蔽双层AP视频摘要生成方法，包括以下步骤：

步骤1，获取待处理视频；

步骤2，对待处理视频进行视觉屏蔽，得到降维后的视频；

步骤3，对降维后的视频的每一帧提取PHOG特征得到N维特征序列{b₁,b₂,…,b_N}；

步骤4，对N维特征序列{b₁,b₂,…,b_N}进行分组，每N_τ帧为一组，分出S组；

步骤5，采用AP算法对S组特征序列分别聚类，得到第一阶段的S组关键帧；

步骤6，合并S组关键帧，得到第一阶段的关键帧序列；

步骤7，提取第一阶段关键帧的灰度直方图特征，与对应的PHOG特征进行融合得到PHOG-Hist融合特征序列{c₁,c₂,…,c_N1}；

步骤8，采用AP算法对融合特征序列{c₁,c₂,…,c_N1}进行聚类，得到最终的输出视频摘要。