[发明专利]手势识别方法及装置

权利要求书

1.一种手势识别方法，其特征在于，包括：

获取第一图像向量和所述第一图像向量的权重；所述第一图像向量为第一图像序列中关键帧的图像向量；所述第一图像向量的权重为所述关键帧在所述第一图像序列中的权重；所述第一图像序列为根据待识别手势的视频图像生成的图像序列；

根据所述第一图像向量和所述第一图像向量的权重生成第一手势特征向量；

根据所述第一手势特征向量和第一手势特征向量集合确定所述待识别手势的手势识别结果；所述第一手势特征向量集合为手势识别结果已知的手势特征向量组成的集合。

2.根据权利要求1所述的手势识别方法，其特征在于，所述获取第一图像向量和所述第一图像向量的权重，包括：

获取第一图像向量集合；所述第一图像向量集合为所述第一图像序列包含的图像的图像向量组成的集合；

根据注意力模型计算所述第一图像向量集合中每一个图像向量的注意力权重；

确定注意力权重大于注意力阈值的图像向量和该注意力权重为第一图像向量和该第一图像向量的权重。

3.根据权利要求1或2所述的手势识别方法，其特征在于，所述根据所述第一图像向量和所述第一图像向量的权重生成第一手势特征向量，包括：

对所述第一图像向量进行编码处理，得到编码后的第一图像向量；

根据所述编码后的第一图像向量和所述第一图像向量的权重生成第一手势特征向量。

4.根据权利要求1至3任意一项所述的手势识别方法，其特征在于，所述第一手势特征向量集合包括的手势识别结果已知的手势特征向量对应至少一个已知手势类别，一个已知手势类别对应一个已知手势识别结果；

所述根据所述第一手势特征向量和第一手势特征向量集合确定所述待识别手势的手势识别结果，包括：

确定第一手势类别；所述第一手势类别为所述至少一个已知手势类别中与所述第一手势特征向量相似度最大的已知手势类别；

若所述第一手势特征向量与所述第一手势类别的相似度大于预设相似度阈值，确定所述第一手势类别对应的已知手势识别结果为所述待识别手势的手势识别结果。

5.根据权利要求4所述的手势识别方法，其特征在于，所述方法还包括:

若所述第一手势特征向量与所述第一手势类别的相似度小于等于预设相似度阈值，获取用户输入的第一手势识别结果；

确定所述第一手势识别结果为所述待识别手势的手势识别结果。

6.根据权利要求5所述的手势识别方法，其特征在于，所述方法还包括：

根据所述第一手势特征向量和所述待识别手势的手势识别结果更新所述第一手势特征向量集合。

7.一种手势识别装置，其特征在于，包括：

获取模块，用于获取第一图像向量和所述第一图像向量的权重；所述第一图像向量为第一图像序列中关键帧的图像向量；所述第一图像向量的权重为所述关键帧在所述第一图像序列中的权重；所述第一图像序列为根据待识别手势的视频图像生成的图像序列；

处理模块，用于根据所述第一图像向量和所述第一图像向量的权重生成第一手势特征向量；根据所述第一手势特征向量和第一手势特征向量集合确定所述待识别手势的手势识别结果；所述第一手势特征向量集合为手势识别结果已知的手势特征向量组成的集合。

8.根据权利要求7所述的手势识别装置，其特征在于，所述获取模块具体用于：

获取第一图像向量集合；所述第一图像向量集合为所述第一图像序列包含的图像的图像向量组成的集合；

根据注意力模型计算所述第一图像向量集合中每一个图像向量的注意力权重；

确定注意力权重大于注意力阈值的图像向量和该注意力权重为第一图像向量和该第一图像向量的权重。

9.根据权利要求7或8所述的手势识别装置，其特征在于，所述处理模块具体用于：

对所述第一图像向量进行编码处理，得到编码后的第一图像向量；

根据所述编码后的第一图像向量和所述第一图像向量的权重生成第一手势特征向量。