[发明专利]一种基于时空信息和层级表示的视频人体行为识别方法

摘要

本发明涉及人工智能领域，更具体的，涉及一种基于时空信息和层级表示的视频人体行为识别方法。本发明充分利用了视频中的时空信息，层级时空束将视频运动分为几个部分，进而得到视频运动的更高维度的表示。针对传统视频表示方法忽略视频的中高层语义信息，仅仅关注特征出现的次数，利用的只是0阶信息等不足，基于层级时空束的视频表示方法能够有效剪除视频的背景噪声干扰、并且弥补底层特征与高层特征之间的语义鸿沟，可以捕获更高阶更复杂的运动结构信息。层级时空束方法可以在更高的维度上，析取更加复杂和更具表现力的视频表示，能够有效提高视频识别的效果。

主权项

1.一种基于时空信息和层级表示的视频人体行为识别方法，其特征在于，包括以下步骤：步骤S1：基于摄像机运动补偿整个视频片段的整体光流，提取前景运动光流，并形成补偿轨迹；步骤S2：通过关键帧选择，过滤得到视频中具有判别力的关键帧；步骤S3：对补偿轨迹采样并训练得到混合高斯模型；步骤S4：选择关键帧得到视频关键帧集合，并结合混合高斯模型对补偿轨迹进行FV编码，形成关键轨迹集；步骤S5：将整个视频进行片段分割与排序模型，将分割后的视频片段执行步骤S1～步骤S4，获得分割后视频片段的层级时空束特征；步骤S6：将以层级时空束作为视频表示，并作为分类器的输入，经过SVM分类之后，得到视频分类标签。