[发明专利]一种基于手写输入和指尖鼠标的电视人机交互方法

摘要

本发明公开一种基于手写输入和指尖鼠标的电视人机交互方法。包括以下步骤：通过电视机内置或分立的双目摄像头采集图像，继而对同步采集的两幅图像进行图像三维重建，利用重建获取的深度信息对手势图像进行前景分割，对分割的图像进行手势检测，结合手势检测的结果对食指轮廓进行提取并获得指尖点的坐标，最终电视机内的人机交互程序利用指尖点坐标的变化实现手写输入和指尖鼠标的电视交互操作。本发明可以减少手势检测和指尖定位的运算量，降低电视屏幕光线变化对指尖定位的影响，采用在线的方式对食指分割的阈值进行动态调整，满足电视人机交互操作实时性的要求，利用上述方法可以实现人与电视的交互，对智能电视的发展具有推动作用。

主权项

一种基于手写输入和指尖鼠标的电视人机交互方法，其特征在于包括以下步骤：步骤一，电视机内置或者分立的双目摄像头同步采集图像；步骤二，利用双摄像头同步采集的两幅图像重建出具有深度信息的三维图像；步骤三，利用上述三维图像的深度信息实现前景分割，从而完成手势图像与前景的分离；步骤四，采用模板匹配的方法对手势拳头图像进行检测，拳头的特征值通过离线训练的方式得到，若成功检测到拳头图像，则用矩形框标记检测到的图像区域，同时记录矩形框的坐标，若遍历特定区域的图像仍未检测到拳头图像，则返回步骤一； 步骤五，利用拳头与食指的肤色一致特征，结合步骤四检测的结果，对食指图像进行分割，继而对食指图像进行轮廓提取；步骤六，求取食指轮廓曲线的切线斜率，斜率绝对值最小的切点即为指尖点，同时记录指尖点的坐标值；步骤七，电视机内的指令执行模块根据指尖点的坐标变化对手势指令进行判断，并执行相对应的应用程序。