[发明专利]一种骨架人体行为识别方法、装置及设备

权利要求书

1.一种骨架人体行为识别方法，其特征在于，包括：

获取目标对象的骨架数据，所述骨架数据包括关节数据和骨骼数据；

基于所述骨架数据的关键点计算得到关节差异数据及骨骼差异数据；

基于所述关节差异数据及骨骼差异数据进行特征提取，得到骨架数据特征及骨架差异数据特征，并基于所述骨架数据特征获得关节数据特征以及关节差异数据特征；

分别基于所述关节数据特征及关节差异数据特征、骨骼数据及骨骼差异数据特征进行特征数据拼接融合，得到关节拼接特征及骨骼拼接特征；

将不同维度分支的关键位置特征分别与所述关节拼接特征及骨骼拼接特征进行强化融合，得到动作分类预测结果。

2.根据权利要求1所述的骨架人体行为识别方法，其特征在于，基于所述骨架数据的关键点计算得到关节差异数据，包括：

基于所述骨架数据提取关节数据；

基于所述关节数据建立关节坐标系；

基于所述关节坐标系提取预设时间内的关节变化数据，并基于所述关节变化数据以及关节数据计算预设时间内的差值，以此得到关节差异数据。

3.根据权利要求1所述的骨架人体行为识别方法，其特征在于，基于所述骨架数据的关键点计算得到骨骼差异数据，包括：

基于所述骨架数据提取骨骼数据；

基于所述骨骼数据建立骨骼坐标系；

基于所述骨骼坐标系提取预设时间内的骨骼位置变化数据，并基于所述骨骼变化数据以及骨骼数据计算预设时间内的差值，以此得到骨骼差异数据。

4.根据权利要求1所述的骨架人体行为识别方法，其特征在于，基于所述骨骼差异数据进行特征提取，得到骨架数据特征及骨架差异数据特征，包括：

基于所述骨骼差异数据以及预设时间构建骨架差异数据坐标系；

基于所述骨架差异数据坐标系提取预设时间内骨骼差异变化图像；

基于所述骨骼差异变化图像获得骨架数据特征及骨架差异数据特征。

5.根据权利要求1所述的骨架人体行为识别方法，其特征在于，基于所述关节数据特征及关节差异数据特征进行特征数据拼接融合，得到关节拼接特征，包括：

基于所述关节数据特征以及关节差异数据特征构建第一网络图层；

基于所述第一网络图层进行数据排序，获得第一排序结果；

基于所述第一排序结果进行特征数据拼接融合，得到关节拼接特征。

6.根据权利要求1所述的骨架人体行为识别方法，其特征在于，基于所述骨骼数据及骨骼差异数据特征进行特征数据拼接融合，得到骨骼拼接特征，包括：

基于所述骨骼数据以及骨骼差异数据特征构建第二网络图层；

基于所述第二网络图层进行数据排序，获得第二排序结果；

基于所述第二排序结果进行特征数据拼接融合，得到骨骼拼接特征。

7.根据权利要求1所述的骨架人体行为识别方法，其特征在于，将不同维度分支的关键位置特征分别与所述关节拼接特征及骨骼拼接特征进行强化融合，得到动作分类预测结果，包括：

基于所述关节拼接特征以及骨骼拼接特征建立融合层；

基于所述融合层提取关键位置特征信息，所述关键位置基于所述骨架数据特征以及骨架差异数据特征获得；

基于所述关键位置特征信息获得所述骨架数据的预测数值；

基于所述预测数值得到动作分类预测结果。