[发明专利]手部动作识别方法、装置、电子设备及存储介质

说明书

本申请涉及人工智能技术领域，公开了一种手部动作识别方法、装置、电子设备及存储介质，提高针对手部危险动作识别的准确度。所述方法包括：从包含目标对象的视频帧中提取目标对象的手部位置；识别手部位置周围的局部图像中包含的手持物品的类别；确定目标对象的手部位置姿态，手部位置姿态表征手部相对人体所处的位置；基于包含目标对象的多个视频帧，确定目标对象的手部运动状态；基于手持物品的类别、手部位置姿态和手部运动状态，确定目标对象的手部动作所属的危险动作类别。

技术领域

本申请涉及人工智能技术领域，尤其涉及一种手部动作识别方法、装置、电子设备及存储介质。

背景技术

日常生活中可能会发生一些危险行为，比如手持刀具或者棍棒、投掷危险物品，等等，这些危险行为会给人民的生命财产带来一定的威胁。目前市场上还没有能自动检测危险动作的相关技术和产品，无法在危险事件发生的第一时间就生成报警信息，以降低对人民的生命和财产的威胁。

发明内容

本申请实施例提供一种手部动作识别方法、装置、电子设备及存储介质，提高针对手部危险动作识别的准确度。

一方面，本申请一实施例提供了一种手部动作识别方法，包括：

从包含目标对象的视频帧中提取所述目标对象的手部位置；

识别所述手部位置周围的局部图像中包含的手持物品的类别；

确定所述目标对象的手部位置姿态，所述手部位置姿态表征手部相对人体所处的位置；

基于包含所述目标对象的多个视频帧，确定所述目标对象的手部运动状态；

基于所述手持物品的类别、所述手部位置姿态和所述手部运动状态，确定所述目标对象的手部动作所属的危险动作类别。

可选地，所述基于包含所述目标对象的多个视频帧，确定所述目标对象的手部运动状态，具体包括：

获取包含所述目标对象的多个视频帧；

从所述多个视频帧中分别提取所述目标对象的手部位置和人体中心位置；

基于所述目标对象在所述多个视频帧中的手部位置和人体中心位置，获得所述手部位置相对于人体中心位置的移动速度。

可选地，所述基于所述手持物品的类别、所述手部位置姿态和所述手部运动状态，确定所述目标对象的手部动作所属的危险动作类别，具体包括：

确定所述手持物品的类别和所述手部位置姿态所满足的目标判断条件，其中，每个危险动作类别对应一个判断条件；

若移动速度大于速度阈值，则将所述目标判断条件对应的危险动作类别，确定为所述目标对象的手部动作所属的危险动作类别。

可选地，所述方法还包括：

基于包含所述目标对象的多个视频帧，确定所述手持物品的运动状态；

所述基于所述手持物品的类别、所述手部位置姿态和所述手部运动状态，确定所述目标对象的手部动作所属的危险动作类别，具体包括：

基于所述手持物品的类别、所述手部位置姿态、所述手部运动状态和所述手持物品的运动状态，确定所述目标对象的手部动作所属的危险动作类别。

可选地，所述确定所述目标对象的手部位置姿态，具体包括：

从所述视频帧中获取所述目标对象的多个人体关键点；

根据所述手部位置与所述多个人体关键点之间的位置关系，确定手部位置姿态。

可选地，所述确定所述目标对象的手部位置姿态之前，所述方法还包括：

从所述视频帧中获取所述目标对象的多个人体关键点；