[发明专利]一种用于娃娃机的手势控制方法、存储介质和娃娃机

摘要

本发明提出一种用于娃娃机的手势控制方法、存储介质和娃娃机，所述娃娃机包括娃娃机本体，存储器和实现其程序的处理器，处理器通过手势控制模块实现操作。娃娃机本体包括：机架、机械臂、电机及驱动结构。手势控制模块包括：主控模块、通信模块、手势捕获模块三部分。模块整体基于嵌入式平台搭建，采用普通单目摄像头进行图像采集，通过串口线与娃娃机通信。其中，手势捕获模块通过单目摄像头采集手部图像，并识别手势动作，主控模块将相应手势转化控制指令，再经由通信模块将指令发送至娃娃机。本发明控制方式新颖，操作体验良好，对背景环境适应性好，同时设备成本低，还可基于传统市售娃娃机进行改造，具有良好的市场前景。

主权项

1.一种用于娃娃机的手势控制方法，其特征在于：手势捕获模块利用单目摄像头采集图像，对图像进行分析计算出当前视场中是否有手势和手势动作，并判断手势动作类型，将获取到的手势信息传递给主控模块；所述主控模块将相应手势信息转化为控制指令；所述控制指令经由通信模块发送至娃娃机；所述手势捕获模块具体操作步骤为：步骤a：读取模板数据，提取包括手势模板图片的收集，特征点提取和全部特征点的最大最小位置；步骤b：量化梯度，捕捉到的图像，计算图像梯度，将梯度量化到T个方向，对每个像素的T*T大小范围内的梯度方向使用同一个梯度方向表示，利用方向相似度对照表，对每个像素点的方向计算统计其每个方向的相似度；步骤c：与模板进行匹配，将步骤b得到的表示一帧图像的多个方向图像数组与模板进行匹配，以T为阈值，计算一帧图像中共有几个T*T区域，再以T*T作为匹配模板，在图像中进行移动，将每个对应位置像素点的方向与匹配模板中的该位置的方向进行比较，得到相似度值，存储超过判定阈值SCORE的点的坐标位置、相似度、手势类型以及点匹配到的模板；步骤d：将模板匹配的结果进行进一步融合，依据模板轮廓找出当前帧手势轮廓，通过判断手势轮廓的凹凸点个数判断手势类型。