[发明专利]一种手掌动作识别的方法、设备及介质

说明书

本发明公开了一种手掌动作识别的方法、设备及介质，方法包括：对手部图像进行初步提取，得到动作特征识别结果和置信度；确定是否满足筛选条件；所述筛选条件包括以下任一：所述动作特征识别结果属于第一层动作；所述动作特征识别结果属于第二层动作且所述置信度不小于置信度阈值；若是，则所述动作特征识别结果即为手掌动作识别结果；若否，则对手部图像进行骨架提取，得到骨架提取参数；根据所述骨架提取参数，确定手掌动作识别结果；本发明公开的方法通过骨架提取对不够准确且容易混淆的初步提取再次进行动作的识别，减少了环境对动作识别的影响，提高对容易混淆的动作的识别准确率。

技术领域

本发明涉及计算机视觉图像识别领域，特别是涉及一种手掌动作识别的方法、设备及介质。

背景技术

随着人机交互技术的发展，手势动作作为一种自然、方便以及高效的交互方式受到人们的关注。

现有的手势动作识别方法在环境复杂的场景中，当场景内出现较大运动干扰或光照干扰时，识别效果不太好，对于识别容易混淆的动作准确率不高，鲁棒性不好。

发明内容

以下是对本文详细描述的主题的概述。本概述并非是为了限制权利要求的保护范围。

本发明旨在至少解决现有技术中存在的技术问题之一。为此，本发明提出一种手掌动作识别的方法，能够提高对容易混淆的动作的识别准确率，减少因环境造成的干扰。

本发明还提出一种具有上述手掌动作识别的方法的设备和介质。

根据本发明的第一方面实施例的一种手掌动作识别的方法，包括：

步骤S100、对手部图像进行初步提取，得到动作特征识别结果和置信度；

步骤S200、确定是否满足筛选条件；所述筛选条件包括以下任一：所述动作特征识别结果属于第一层动作；所述动作特征识别结果属于第二层动作且所述置信度不小于置信度阈值；若是，则所述动作特征识别结果即为手掌动作识别结果；若否，则执行步骤S300；

步骤S300、对手部图像进行骨架提取，得到骨架提取参数；

步骤S400、根据所述骨架提取参数，确定手掌动作识别结果。

根据本发明实施例的一种手掌动作识别的方法，至少具有如下有益效果：对于初步识别为易混淆的动作且置信度不高的识别结果，可认为是由于受到了复杂环境影响的易混淆动作的不准确识别，因此需进行骨架提取，减少环境对识别结果的影响，再根据骨架提取参数，确定手掌动作识别结果，提高识别准确度。

根据本发明的一些实施例，在步骤S100中，所述对手部图像进行初步提取，得到动作特征识别结果和置信度包括：

对手部图像进行肤色提取，得到第一图像；

对所述第一图像进行神经网络的动作特征识别，得到动作特征识别结果和置信度。

根据本发明的一些实施例，所述对手部图像进行肤色提取，得到第一图像包括：

对手部图像进行滤波，得到滤波图像；

根据所述滤波图像，得到初始手部动作轮廓区域；

根据所述初始手部动作轮廓区域，得到在所述手部图像的感兴趣区域；

根据所述滤波图像，确定所述手部图像所在的场景是否为亮场景；

若是，则根据第一阈值对所述感兴趣区域进行提取，得到初始手部轮廓；若否，则根据第二阈值对所述感兴趣区域进行提取，得到初始手部轮廓；

对所述初始手部轮廓进行形态学处理，得到第二图像；

对所述第二图像进行尺寸归一化，得到第一图像。