[发明专利]一种实时手势识别方法及装置

摘要

本发明涉及体感控制领域，尤其是一种实时手势识别方法及装置。本发明所要解决的技术问题是：针对上述存在的问题，提供一种实时手势识别方法及装置，本发明涉及一种实时精准的手势识别方法，能在一帧内边进行图像实时输出边进行该算法进行图像处理，从而可以获得任何类型的二维或三维图像目标边缘、骨架、尖端、节点等丰富数据信息；且数据信息能实时的进行排序以获得顺序数组。还可以实现基于骨架特征的目标精确实时跟踪匹配，医学上动静脉轨迹分析。本装置包括所述手势识别装置包括手势识别控制装置和2自由度机械杆。

主权项

一种实时手势识别方法，其特征在于包括：步骤1：通过手势识别装置的左摄像头、右摄像头，进行图像显示帧的同步实时k行全屏扫描，获取红外图像数据，处理器分别对红外图像数据进行处理；步骤2：处理器将红外图像转化为灰度图像通过自适应阀值处理，将手势区域与背景区域进行分离，通过图像二值化的自适应法处理获得手势目标的二值化图；步骤3：通过基于目标边界的预测归类算法对手势区域中每个手指进行相关特征的坐标位置的预测，并将不同的手指特征数据分离归类，获取手势区域中不同手指起始边缘数组aei、手指终止边缘数组bei、手掌边缘数组和手指骨干数组cei；当e=1时，代表左摄像头数据，e=2时，代表右摄像数据；步骤4：通过每个手指的手指起始边缘aei、手指终止边缘bei和手指骨干数组cei，获得手指指尖圆心坐标(xei,yei)；步骤5：通过步骤3、4，根据手指末端判断准则，获得不同手指指节末端；步骤6：所述左摄像头、右摄像头分别通过对应的不同手指指节末端和手掌边缘拟合手掌圆心(xe0,ye0)；对左摄像头、右摄像头采集同一手势姿势的数据，进行双视差图匹配计算，得到匹配手势识别坐标点；步骤7：将匹配手势识别坐标点进行三维建模从而获得手势的3维数据信息；对三维数据信息的运动轨迹进行平滑处理；将平滑后的三维数据信息进行应用输出。