[发明专利]基于线性动态系统的视角无关的人体行为识别方法

说明书

本发明公开了一种视角无关的人体行为识别的方法，主要解决不同视角下相同动作的识别问题。该方法的具体过程是：对动作视频序列进行2D高斯滤波和1D Gabor滤波得到兴趣点，然后以兴趣点为中心建立立方体特征；再对动作视频序列等间隔划分并密集采样提取等大小的立方体特征，将两种方法得到的立方体合并为一个集合；接着对得到的立方体进行LDSs建模，用一对参数(A,C)表示，定义Martin距离表示两个系统参数间的距离；利用Martin距离，结合非线性降维(MDS)和聚类算法构建码本；计算每个视频提取的时空特征与码本的距离，利用Soft‑weighting方法，计算加权矢量作为每个视频的特征向量，从而进行SVM训练与识别。

技术领域

本发明属于图像处理技术及模式识别领域，特别涉及一种基于线性动态系统的视角无关的人体行为识别方法。

背景技术

人体行为分析涉及计算机视觉、图像处理、模式识别、人工智能等多个研究领域。它可以简单地被认为是时变数据的分类问题，即将测试序列与预先标定的代表类型行为的参考序列进行匹配,又可称之为人体行为识别。尽管人体行为识别的研究已经取得了一定的成果，但大部分工作都是基于固定和已知视角的，而由于人体运动、摄像机运动等原因实际拍摄得到的数据常常是任意角度的。不同的拍摄角度不仅会给人体图像序列的外观带来很大变化，运动的过程也会有所不同。视角问题已经成为人体行为识别发展和应用的绊脚石。

目前比较常见的视角无关的人体行为识别方面的工作，大多是在融合多个角度数据构建3D模型基础上进行的。这类方法不仅增加了算法的复杂性和计算量，而且透视投影等原因也会使重构出的动作不准确。不仅如此，在实际中常常由于无法得到多个不同拍摄角度的数据等原因，如单摄像机监控等，使得这类方法无法应用。其他一些方法如知识迁移，提取两个视角下的特征并且运用这些特征在两者之间架起了一座虚拟桥梁，对于一个视角下观察到的新的动作类别，运用知识迁移在另一个视角下能够进行识别。这种方法得到的特征具有视角不变性以及很好的识别力，但是要求所有视角中每两对视角都需要单独训练，还需要足够的测试样本，而且动作还需要加上类别标签，因此限制了它的应用。另外的方法还有潜在双线性模型，时间自相关描述符，但是前者不容易获得良好的初始化参数，后者在顶角视角下效果比较差，因此也限制了它们的应用。而本发明则能很好的解决以上的不足。

发明内容

本发明的目的在于提出一种基于线性动态系统的视角无关的人体行为识别方法,其包括如下步骤：

第一步：低层特征提取。首先,第一方面，将动作视频序列中的每一帧用二维坐标到像素点亮度的映射表示。然后,使用空间域中的2D高斯核函数将其每一帧变换到高斯空间。接下来,对经过高斯平滑的视频序列，沿着时间轴方向对每一列元素进行选定窗口的一维Gabor滤波。对于大于一定阈值的响应值进行极大值滤波确定特征点位置，然后以特征点为中心提取时空体特征。第二方面，对视频序列分别在时间轴上和空间上划分等间隔，使视频序列成为一个个小时空体组成的集合。然后以时空体与时空体接点为中心提取等大小的时空体(比前面划分的要小)。最后将两个方面提取的时空体合并成为一个集合用于LDS建模。

第二步：对提取的每个时空体建立LDS模型，主要用一对参数(A,C)表示。定义Martin距离表示两个系统参数间的距离。由于LDS参数是在非欧式空间下，因此不能直接聚类。利用Martin距离，结合非线性降维(MDS)和聚类算法构建码本。即假设训练集中总共T个特征，构建T×T的矩阵D表示每个特征间的距离，通过MDS得到欧式空间下的低维表示。K-means聚类后得到聚类中心，但这些聚类中心并不对应原始的LDSs，计算低维空间中每个系统到聚类中心的距离，选择距离最近的高维空间中的对应系统来作为码本。这里是每个动作分别聚类生成码本。