[发明专利]一种基于视频前后帧相关信息感知的运动特征提取方法

权利要求书

1.一种基于视频前后帧相关信息感知的运动特征提取方法，其特征在于，包括以下步骤：

(1)使用神经网络方法，提取目标视频的特征。

(2)根据步骤1提取的特征，显式地提取前后帧特征之间的相关性信息特征。

(3)将步骤1提取的目标视频的特征与步骤2提取的相关性信息特征结合，使用神经网络方法提取目标视频的运动特征。

2.根据权利要求1所述的运动特征提取方法，其特征在于，所述步骤1具体为：

对目标视频的输入，使用二维神经网络来提取目标视频的特征；

或者对目标视频的输入，使用三维神经网络来提取目标视频的特征。

3.根据权利要求1所述的运动特征提取方法，其特征在于，所述步骤2包括以下子步骤：

(2.1)将步骤1提取的目标视频的特征作为输入特征，通过一层卷积核大小为1x1的卷积网络层，生成新的特征。

(2.2)根据上述新的特征，通过以sobel算子或时序特征差值为卷积核的卷积网络层生成相关性信息特征。

4.根据权利要求3所述的运动特征提取方法，其特征在于，所述步骤2.2中，所述卷积网络层优选以向量维度为3x3的x方向的sobel算子为卷积核的卷积网络层、以向量维度为3x3的y方向的sobel算子为卷积核的卷积网络层、以向量维度为2x1x1，值为[-1,1]的向量为卷积核的卷积网络层；

5.根据权利要求1所述的运动特征提取方法，其特征在于，所述步骤3具体为：将步骤1提取的目标视频的特征与步骤2提取的相关性信息特征直接相加得到新生成的特征，将新生成的特征通过一层卷积核大小为1x1的卷积神经层，生成目标视频的运动特征。

6.根据权利要求1所述的运动特征提取方法，其特征在于，所述步骤3具体为：将步骤1提取的目标视频的特征与步骤2提取的相关性信息特征在特征维度上拼接在一起，得到新生成的特征，将新生成的特征通过一层卷积核大小为1x1的卷积神经层，生成目标视频的运动特征。