[发明专利]基于视频的人体交互动作识别方法

摘要

本发明公开一种基于视频的人体交互动作识别方法，包括以下步骤：S1：对输入的视频帧图像采用帧间差分法进行运动目标检测；S2：对处理后获得的运动目标进行特征提取，包括：S21：对处理后获得的运动目标采用局部时空特征与全局光流特征相结合的方式提取人体交互动作特征；S22：对所述光流和时空兴趣点进行描述，形成特征描述子HOF和HOG；S23；将所述局部时空特征与全局光流特征分别通过BP神经网络，以获得在某一特征下动作类别的概率矩阵；S3：通过对利用不同特征得到的概率矩阵赋予不同权值进行加权求和以得到融合概率矩阵，概率最大的动作类别即为该帧的动作类别；S4：将初始分类序列输入到改进的正态分布BP神经网络中，获得最终的交互动作分类。

主权项

1.一种基于视频的人体交互动作识别方法，其特征在于，包括以下步骤：S1：对输入的视频帧图像进行处理，采用帧间差分法进行运动目标检测，检测公式为：D_t(x,y)＝|I_t(x,y)‑I_t‑1(x,y)|，其中，x,y表示图像中横纵坐标位置，Dt(x,y)表示帧差图像中(x,y)点的像素值，It(x,y)表示t时刻图像(x,y)点的像素值，It‑1(x,y)表示t‑1时刻图像(x,y)点的像素值，Rt(x,y)表示检测结果，值为1表示图像(x,y)点为运动目标，值为0表示图像(x,y)点为背景，T表示设定的阈值；S2：对处理后获得的运动目标进行特征提取；该步骤分别包括以下内容：S21：提取模块用于对处理后获得的运动目标采用局部时空特征与全局光流特征相结合的方式提取人体交互动作特征；S22：对所述光流和时空兴趣点进行描述，形成特征描述子HOF和HOG；S23；将所述局部时空特征与全局光流特征分别通过BP神经网络，以获得在某一特征下动作类别的概率矩阵；S3：通过对利用不同特征得到的概率矩阵赋予不同权值进行加权求和，以得到融合概率矩阵，从中找到概率最大的动作类别即为该帧的动作类别，分类公示如下：P＝Wa*Pa+Wb*Pb；其中P代表该帧的动作类别融合概率，Wa代表特征A的权值，Pa代表通过特征A得到的该帧动作类别概率，Wb代表特征B的权值，Pb代表通过特征B得到的该帧动作类别概率；S4：通过将初始分类序列输入到改进的正态分布BP神经网络中，从而获得最终的交互动作分类，实现人体交互动作识别。