[发明专利]基于稀疏子空间聚类的视频人体行为识别方法

摘要

该发明属于计算机视觉模式识别和视频图像处理方法，包括：建立视频人体行为识别的模型中的建立三维时空子帧立方体，建立人体行为特征空间，聚类处理，标签的更新，建立视频人体行为识别模型及人体行为的识别中的从监视视频中提取三维时空子帧立方体，人体行为特征提取，确定各视频人体子行为的类别，带子类别标签视频的归类合并；与目前国际上对Hollywood2人体行为数据库最高识别准确率相比提高了16.5％。因而该发明具有能自动提取出更具有判别性、自适应性、通用性和不变性的人体行为特征，降低了神经网络中的过拟合现象和梯度扩散问题，有效提高了复杂环境下人体行为识别的准确率，可广泛运用于现场视频监控和视频内容检索等特点。

主权项

1.一种基于稀疏子空间聚类的视频人体行为识别方法，包括：A.建立视频人体行为识别的模型：A1.建立三维时空子帧立方体：将用于学习的人体行为数据库的同一类别人体行为视频上的每一帧划分为相同大小的子帧，然后将组成相应人体行为视频的部分连续帧的时间序列长度作为其厚度，以建立三维时空子帧立方体，并对所得各子帧立方体在原人体行为视频相同的类别标签下分别标注其子标签；A2.建立人体行为特征空间：将步骤A1所建各三维时空子帧立方体连同其人体行为视频的类别标签输入到基于深度学习的神经网络、进行第一次训练，以提取超过人体行为数据库中给定行为类别平均识别率达到50％的用于分类的特征，建立第一次训练后的人体行为特征空间；A3.聚类处理：对步骤A2所建人体行为特征空间，利用稀疏子空间聚类方法分别对行为特征空间中的每一类人体行为特征进行聚类处理，以将同一类人体行为特征再细分为子类行为特征；行为特征子类的个数根据稀疏子空间聚类方法自动确定；A4.标签的更新：根据步骤A3中稀疏子空间聚类方法细分的结果，在原人体行为视频相同的类别标签下分别对聚类细分后的各行为特征子类视频赋予其子标签，得更新标签后的样本；A5.建立视频人体行为识别模型：将步骤A4所得更新标签后的样本输入到与步骤A2相同的基于深度学习的神经网络进行第二次训练，以进一步提取人体行为特征,然后将提取出的行为特征输入分类器进行分类处理，从而建立用于视频人体行为识别的模型；并保存第二次训练后神经网络参数，待用；B.人体行为的识别：B1.从监视视频中提取三维时空子帧立方体：采用与步骤A1相同的方法，对监视到的每段人体行为视频分别提取与步骤A1大小及数量相同的三维时空子帧立方体，然后转步骤B2；B2.人体行为特征提取：将步骤B1提取的各段视频的三维时空子帧立方体分别输入到经步骤A5训练好并保存待用的神经网络中，以提取各段视频的人体子行为特征；B3.确定各视频人体子行为的类别：将步骤B2中提取到的各段视频人体子行为特征，分别输入分类器分类，对各段监控视频依次进行分类处理，得到带各子类别标签的视频；B4.带子类别标签视频的归类合并：将步骤B3所得带各子类别标签的视频，按照Hollywood2人体行为数据库所分大类归类合并，即得各视频人体行为所属行为类别，存储以备调用。