[发明专利]动作识别方法、装置、计算机存储介质和计算机设备

权利要求书

1.一种动作识别方法，包括：

获取视频数据在不同时序帧的图像数据，通过多通道卷积层获取各时序帧的图像数据在不同卷积通道上的原始子特征图；

分别以各个时序帧作为目标时序帧，根据目标时序帧在各卷积通道上的原始子特征图，以及与目标时序帧相邻的后一时序帧在各卷积通道上的原始子特征图，计算目标时序帧在各卷积通道上的运动信息权重；

根据目标时序帧在各卷积通道上的运动信息权重以及目标时序帧在各卷积通道上的原始子特征图，获取目标时序帧在各卷积通道上的运动信息特征图；

对目标时序帧在各卷积通道上的运动信息特征图进行时序卷积，得到目标时序帧在各卷积通道上的时序运动特征图；

根据目标时序帧在各卷积通道的时序运动特征图获取目标时序帧的图像数据中运动对象的动作类型。

2.根据权利要求1所述的方法，其特征在于，所述根据目标时序帧在各卷积通道上的原始子特征图，以及与目标时序帧相邻的后一时序帧在各卷积通道上的原始子特征图，计算目标时序帧在各卷积通道上的运动信息权重的步骤，包括：

获取目标时序帧的原始子特征图与后一时序帧的原始子特征图在各卷积通道上的差异信息；

通过激活函数将各卷积通道上差异信息映射为目标时序帧在各卷积通道上的运动信息权重。

3.根据权利要求2所述的方法，其特征在于，所述获取目标时序帧的原始子特征图与后一时序帧的原始子特征图在各卷积通道上的差异信息的步骤，包括：

分别通过单位池化层将目标时序帧在各卷积通道上的原始子特征图以及后一时序帧在各卷积通道上的原始子特征图变换为单位子特征图；

分别对目标时序帧在各卷积通道上的单位子特征图以及后一时序帧在各卷积通道上的单位子特征图进行预设缩放倍数的降维，得到降维后的单位子特征图；

获取目标时序帧降维后的单位子特征图与后一时序帧降维后的单位子特征图间的降维差异信息；

对所述降维差异信息进行预设缩放倍数的升维，得到目标时序帧的原始子特征图与后一时序帧的原始子特征图在各卷积通道上的差异信息。

4.根据权利要求1所述的方法，其特征在于，所述对目标时序帧在各卷积通道上的运动信息特征图进行时序卷积，得到目标时序帧在各卷积通道上的时序运动特征图的步骤，包括：

分别获取与目标时序帧相邻的前一时序帧在各卷积通道的运动信息特征图以及与目标时序帧相邻的后一时序帧在各卷积通道的运动信息特征图；

利用时序卷积核对目标时序帧、前一时序帧以及后一时序帧在同一卷积通道的运动信息特征图进卷积运算，得到目标时序帧在各个卷积通道上的时序运动特征图。

5.根据权利要求1所述的方法，其特征在于，所述根据目标时序帧在各卷积通道的时序运动特征图获取目标时序帧的图像数据中运动对象的动作类型的步骤，包括：

将目标时序帧的时序运动特征图输入至残差网络层中，得到目标时序帧的图像数据的动作特征信息；

将所述动作特征信息输入至动作分类网络层中，获取目标时序帧的图像数据中运动对象的动作类型。

6.根据权利要求5所述的方法，其特征在于，所述将目标时序帧的时序运动特征图输入至残差网络层中，得到目标时序帧的图像数据的动作特征信息的步骤之后，还包括：

将所述动作特征信息确定为目标时序帧的图像数据在不同卷积通道上的原始子特征图；

重新执行根据目标时序帧在各卷积通道上的原始子特征图，以及与目标时序帧相邻的后一时序帧在各卷积通道上的原始子特征图，计算目标时序帧在各卷积通道上的运动信息权重的步骤。

7.根据权利要求1所述的方法，其特征在于，所述根据目标时序帧在各卷积通道的时序运动特征图获取目标时序帧的图像数据中运动对象的动作类型的步骤之后，还包括：

在得到各个时序帧的图像数据中运动对象的动作类型后，根据各时序帧的动作类型确定所述视频数据的动作类型。