[发明专利]多指触摸方法和装置、便携式终端设备

权利要求书

1.一种多指触摸方法，包括：

响应于用户伸出至少一个手指指向计算机屏幕，识别摄像机采集的图像帧中的人眼和至少一个手指；

将识别的所述手指在所述图像帧中的第一坐标映射为所述手指在计算机屏幕的第二坐标；

将识别的人眼在所述图像帧中的第三坐标映射为所述人眼在计算机屏幕的第四坐标；

判断所述第四坐标是否在所述第二坐标附近；

响应于判断结果为是，确定所述第二坐标为多指触摸点。

2.根据权利要求1所述的方法，还包括：

为对应于所述第二坐标的多指触摸点分配唯一标识ID；

将所述标识ID和所述第二坐标作为多指触摸事件的参数发送至操作系统。

3.根据权利要求2所述的方法，还包括：

响应于识别出所述图像帧的相邻图像帧包含多指触摸点，则判断相邻图像帧中包含多指触摸点的图像子块是否与所述图像帧中包含多指触摸点的图像子块匹配；

响应于判断结果为是，则用所述标识ID标识相邻图像帧中包含的多指触摸点。

4.根据权利要求1-3任一项所述的方法，其中所述人眼在计算机屏幕的第四坐标基于以下参数计算：人眼在所述图像帧中的第三坐标、人眼大小a、人眼大小a和人眼与计算机屏幕的距离d的关系系数n、人眼的瞳孔在空间坐标系中的朝向。

5.根据权利要求4所述的方法，还包括：

选取手指和人眼的样本图像作为正样本；

选取任意图像作为负样本；

利用所述正样本和负样本训练分类器。

6.根据权利要求5所述的方法，其中识别摄像机采集的图像中的人眼和至少一个手指包括：

将采集的图像帧划分为多个图像子块；

利用所述分类器识别所述多个图像子块中的人眼和至少一个手指。

7.根据权利要求6所述的方法，还包括：

通过图像边缘检测提取算法提取识别的手指的边界和人眼的眼球边界；

根据手指边界像素点的数目和坐标计算所述第一坐标；

根据眼球边界像素点的数目和坐标计算所述第三坐标。

8.一种多指触摸装置，包括：

识别模块，被配置为响应于用户伸出至少一个手指指向计算机屏幕识别摄像机采集的图像帧中的人眼和至少一个手指；

坐标映射模块，被配置为将识别的手指在所述图像帧中的第一坐标映射为所述手指在计算机屏幕的第二坐标，以及将识别的人眼在所述图像帧中的第三坐标映射为所述人眼在计算机屏幕的第四坐标；

判断模块，被配置为判断所述第四坐标是否在所述第二坐标附近；

多指触摸点确定模块，被配置为响应于判断结果为是确定所述第二坐标为多指触摸点。

9.根据权利要求8所述的装置，还包括：

标识ID分配模块，被配置成为对应于所述第二坐标的多指触摸点分配唯一标识ID；

参数发送模块，被配置为将所述标识ID和所述第二坐标作为多指触摸事件的参数发送至操作系统。

10.根据权利要求9所述的装置，其中标识ID分配模块进一步被配置为：

响应于识别出所述图像帧的相邻图像帧包含多指触摸点，则判断相邻图像帧中包含多指触摸点的图像子块是否与所述图像帧中包含多指触摸点的图像子块匹配；

响应于判断结果为是，则用所述标识ID标识相邻图像帧中包含的多指触摸点。

11.根据权利要求8-10任一项所述的装置，其中所述人眼在计算机屏幕的第四坐标基于以下参数计算：人眼在所述图像帧中的第三坐标、人眼大小a、人眼大小a和人眼与计算机屏幕的距离d的关系系数n、人眼的瞳孔在空间坐标系中的朝向。

12.根据权利要求11所述的装置，还包括分类器训练模块，被配置为：

选取手指和人眼的样本图像作为正样本；

选取任意图像作为负样本；

利用所述正样本和负样本训练分类器。

13.根据权利要求12所述的装置，其中识别模块被进一步配置为：

将采集的图像帧划分为多个图像子块；

利用所述分类器识别所述多个图像子块中的人眼和至少一个手指。