[发明专利]手部动作识别方法、装置、电子设备及存储介质

权利要求书

1.一种手部动作识别方法，其特征在于，包括：

从包含目标对象的视频帧中提取所述目标对象的手部位置；

识别所述手部位置周围的局部图像中包含的手持物品的类别；

确定所述目标对象的手部位置姿态，所述手部位置姿态表征手部相对人体所处的位置；

基于包含所述目标对象的多个视频帧，确定所述目标对象的手部运动状态；

基于所述手持物品的类别、所述手部位置姿态和所述手部运动状态，确定所述目标对象的手部动作所属的危险动作类别。

2.根据权利要求1所述的方法，其特征在于，所述基于包含所述目标对象的多个视频帧，确定所述目标对象的手部运动状态，具体包括：

获取包含所述目标对象的多个视频帧；

从所述多个视频帧中分别提取所述目标对象的手部位置和人体中心位置；

基于所述目标对象在所述多个视频帧中的手部位置和人体中心位置，获得所述手部位置相对于人体中心位置的移动速度。

3.根据权利要求2所述的方法，其特征在于，所述基于所述手持物品的类别、所述手部位置姿态和所述手部运动状态，确定所述目标对象的手部动作所属的危险动作类别，具体包括：

确定所述手持物品的类别和所述手部位置姿态所满足的目标判断条件，其中，每个危险动作类别对应一个判断条件；

若移动速度大于速度阈值，则将所述目标判断条件对应的危险动作类别，确定为所述目标对象的手部动作所属的危险动作类别。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

基于包含所述目标对象的多个视频帧，确定所述手持物品的运动状态；

所述基于所述手持物品的类别、所述手部位置姿态和所述手部运动状态，确定所述目标对象的手部动作所属的危险动作类别，具体包括：

基于所述手持物品的类别、所述手部位置姿态、所述手部运动状态和所述手持物品的运动状态，确定所述目标对象的手部动作所属的危险动作类别。

5.根据权利要求1至4任一项所述的方法，其特征在于，所述确定所述目标对象的手部位置姿态，具体包括：

从所述视频帧中获取所述目标对象的多个人体关键点；

根据所述手部位置与所述多个人体关键点之间的位置关系，确定手部位置姿态。

6.根据权利要求1至4任一项所述的方法，其特征在于，所述确定所述目标对象的手部位置姿态之前，所述方法还包括：

从所述视频帧中获取所述目标对象的多个人体关键点；

基于所述多个人体关键点之间的位置关系，确定所述目标对象处于站立姿态。

7.根据权利要求6所述的方法，其特征在于，所述基于所述多个人体关键点之间的位置关系，确定所述目标对象处于站立姿态，具体包括：

若所述多个人体关键点之间的位置关系满足预设条件，则确定所述目标对象处于站立姿态；

其中，所述预设条件包括：

头部位置和脚腕位置的连线与水平线的夹角大于预设角度；以及，

多个人体关键点在所述视频帧中所处位置由高到低的顺序依次为：头部位置、髋部位置、膝盖位置和脚腕位置。

8.根据权利要求1至4任一项所述的方法，其特征在于，所述识别所述手部位置周围的局部图像中包含的手持物品的类别之前，所述方法还包括：

对所述局部图像进行手部识别，确定所述局部图像中包含手部。

9.根据权利要求1至4任一项所述的方法，其特征在于，所述识别所述手部位置周围的局部图像中包含的手持物品的类别之前，所述方法还包括：

对所述局部图像进行物品识别，确定所述局部图像中包含手持物品。