[发明专利]一种基于时空关系的骨架行为识别方法

摘要

本发明公开了一种基于时空关系的骨架行为识别方法，结合卷积神经网络和长短时记忆网络作为行为识别模型，将人体骨架表示成矩阵的形式作为模型的输入，并将骨架序列进行分段处理，使提高网络处理效率，同时能表现各个分段在动作识别中的注意力程度。结合卷积神经网络和长短时记忆网络的特点进行行为识别模型设计，能够自适应的提取人体骨架在时间空间上的动作行为特征，进而进行行为分类。本发明实现了视频中人体行为的智能化识别，从而取代了传统的视频行为识别中依靠人工进行识别时人工精力、时间有限所带来的弊端，从智能化的角度来解决传统行为识别问题。

主权项

1.一种基于时空关系的骨架行为识别方法，其特征在于：方法包括：获取人体骨架数据，并将整体骨架进行部位的划分，将整体人体骨架数据表示为矩阵的形式并进行骨架序列分段处理，将各部位人体骨架数据进行处理分别得到各部位对应的各个时间段的关系矩阵；分别将骨架序列分段处理后的整体人体骨架矩阵数据和各部位各个时间段的人体骨架关系矩阵数据作为卷积神经网络的输入，分别提取得到整体人体骨架和各部位人体骨架各个时间段上的行为特征；分别将整体人体骨架和各部位人体骨架各个时间段上的行为特征按照时间顺序依次作为长短时记忆网络不同时刻的输入，分别得到整体人体骨架和各部位人体骨架包含整个时间段的时空特征；将所有整体人体骨架和各部位人体骨架的时空特征进行融合后通过分类器进行行为结果识别。