[发明专利]一种三维手势识别方法及装置

说明书

本发明公开了一种三维手势识别方法及装置，该方法包括：(1)采集静态手势，并根据建立的手部空间坐标系进行手部位置表示；(2)以静态手势的骨节方向信息作为手势识别的观测值特征序列，并对不同角度和位置下的静态手势对应的手势识别观测值特征序列预处理；(3)采用GMM‑HMM模型对静态手势对应的观测序列进行识别；(4)根据等待模型对动态手势进行识别；(5)在用户使用时收集用户个体的手势数据，并利用该数据对GMM‑HMM模型进行迁移训练，形成针对于每个用户的模型。本发明所述的归一化的方法是在特征序列的基础上来的，它能够在保留完整数据的情况下很方便且准确的实现归一化，使得识别准确率升高。

技术领域

本发明涉及手势识别技术，具体涉及一种三维手势识别方法及装置。

背景技术

随着虚拟现实及增强现实的发展，新的三维界面形式登上历史舞台，手势交互由于其比面部表情和眼动更易于捕捉和识别，又比全身姿势更易于实施(特别是在狭小空间中)的特点成为了更适用于虚拟环境自然用户界面的交互方式。此外在智能产品、汽车、家居等领域，手势交互的作用也逐渐凸显出来。

目前尚没有成熟且具备高度可扩展性的手势交互应用开发工具，而由于手势识别所需的机器学习等专业知识成为了很多开发人员无法逾越的技术壁垒，这就导致了手势交互应用乃至于手势交互发展的滞后。

由于不同人的手掌的尺寸有着相当大的差异，基于坐标点数据的特征序列仍存在着一定的不足，这是由于基于点坐标的归一化方法无法有效的对数据进行归一化处理，这就导致了识别结果的不稳定。

动态识别相较于静态识别而言增加了时间变量这一维度，即观测数据包含多个时间节点的手势观测序列信息，由于带有时间的数据序列不符合GMM-HMM模型的输入数据要求，因而必须要对数据序列进行降维。

在现有的识别算法之中，研究者多采用将三维位置信息换算为手指间的夹角、不同指尖的距离、某部位的位移等低维度数据方式来对数据进行降维，并将每个时间点下的一维参数作为手势识别观测序列值的单个数据节点。

虽然上述方法实现了数据的降维，但对于动态手势识别来说仍然存在着一定的问题：首先上述的降维方式对原始数据进行了二次处理，这势必会导致部分数据的丢失而影响识别结果。其次，由于不同用户做手势的速度和不同时刻设备捕捉手部数据的帧率均有着较大的差异，因而需要对时间序列进行归一化，这就使得必须在运行时保存并处理前100帧左右的数据，从而极大的增加了程序运行时的资源消耗和计算时长。

发明内容

发明目的：为了克服现有技术的不足，本发明提供一种三维手势识别方法，该方法可以解决识别准确率低、运算速度慢的问题，本发明还提供一种三维手势识别装置。

技术方案：本发明所述的一种三维手势识别方法，包括以下步骤：

(1)采集静态手势，并根据建立的手部空间坐标系进行手部位置表示；

(2)以静态手势的骨节方向信息作为手势识别的观测值特征序列，并对不同角度和位置下的静态手势对应的手势识别观测值特征序列进行空间旋转坐标上的归一化，得到各个静态手势对应的观测序列；

(3)确定隐马尔可夫模型的隐含状态数和混合高斯模型的分模型数后，采用GMM-HMM模型对静态手势对应的观测序列进行识别；

(4)根据等待模型对动态手势进行识别；

(5)在用户使用时收集用户个体的手势数据，并利用该数据对原GMM-HMM模型进行迁移训练，形成针对于每个用户的模型。

进一步地，包括：

所述步骤(1)中，手部空间坐标系以手掌掌心方向向量为X轴、手指指向向量为Y轴以及同时与二者垂直的方向向量为Z轴，所在的直线为坐标轴。

进一步地，包括：