[发明专利]基于视觉的手势视频图像识别系统和方法

摘要

本发明公开了一种基于视觉的手势视频图像识别系统和方法，所述手势识别系统包括手部区域提取模块、手部区域跟踪模块、手势特征提取模块、分类器训练模块、识别模块；本方案中通过提出一种新的基于图像边缘和手部肤色的手部区域提取算法从手势视频的每帧图像中分割出手部区域、以及新的动态手势特征提取方式以及特征处理方式，使用隐马尔可夫模型构造动态手势分类器，结合手部形状特征和手部运动特征对分类器进行训练，最后，训练好的分类器可以用于实时识别训练样本集合以外的新手势，能够低运算复杂度识别动态手势从而能够实际应用。

主权项

1.一种基于视觉的手势视频图像识别系统，手势视频图像识别系统包括手势边缘图像提取模块、手势肤色直方图提取模块、图像综合处理模块；所述手势边缘图像提取模块，用于对视频图像中的手使用Canny边缘检测算子提取出手部图像的边缘，进一步使用拉普拉斯轮廓提取方法提取出手部轮廓，得到手势边缘图Ge；所述手势肤色直方图提取模块，使用基于手部肤色方图的手部区域二值化方法，提取手部区域的肤色直方图，在得到肤色直方图后使用图像平滑去噪方法消除手部区域图像中的椒盐噪声，并使用形态学处理技术填充手部区域中细小的孔洞和狭窄的缝隙，从而改进提取出来的手部区域的肤色直方图中的手部区域的质量，得到手势肤色直方图Gh；所述图像综合处理模块，对手势边缘图Ge以及手势肤色直方图Gh进行综合处理，得到更准确的细化手部区域图。