[发明专利]一种目光捕捉方法和采用目光捕捉的人机交互方法

权利要求书

1.一种目光捕捉方法，其特征在于，包括：

A.从图像捕捉设备捕捉的画面中识别出最大的一张人脸的左眼瞳仁在左眼眼眶内的横向偏移程度、右眼瞳仁在右眼眼眶内的横向偏移程度，并通过几何计算，得出双眼瞳仁在眼眶内横向偏移程度的平均值；

B.识别鼻子的横向转动程度；

C.将双眼瞳仁在眼眶内横向偏移程度的平均值按比例排除鼻子的横向转动程度，得到人眼的注视点位置。

2.根据权利要求1所述的方法，其特征在于，所述识别左眼瞳仁在左眼眼眶内的横向偏移程度、右眼瞳仁在右眼眼眶内的横向偏移程度具体实现为：

通过人脸识别算法从图像捕捉设备捕捉的画面中识别出最大的一张人脸所在的矩形子区域；

通过人眼识别算法从所述人脸所在的矩形子区域中识别出双眼所在的矩形子区域；

在所述双眼所在的矩形子区域中识别出左眼眼眶所在的矩形子区域和右眼眼眶所在的矩形子区域；

在所述左眼眼眶所在的子区域中识别出左眼瞳仁的矩形子区域、以及右眼瞳仁的矩形子区域；

通过左眼瞳仁的矩形子区域的位置和左眼眼眶的矩形子区域的位置，计算左眼瞳仁在左眼眼眶内的横向偏移程度，通过右眼瞳仁的矩形子区域的位置和右眼眼眶的矩形子区域的位置，计算右眼瞳仁在右眼眼眶内的横向偏移程度。

3.根据权利要求1所述的方法，其特征在于，还包括：在通过几何计算，得出双眼瞳仁在眼眶内横向偏移程度的平均值之后，将双眼瞳仁在眼眶内横向偏移程度的平均值规整到±20的区间内。

4.根据权利要求2或3所述的方法，其特征在于，所述识别鼻子的横向转动程度具体实现为：

在人脸所在的矩形子区域内，针对左眼眼眶的矩形子区域外侧的第一区域、和右眼眼眶的矩形子区域外侧的第二区域分别进行自适应肉色检测，计算第一区域检测通过的像素数量占整个人脸的矩形子区域的像素数量的比例，计算第二区域检测通过的像素数量占整个人脸的矩形子区域的像素数量的比例，根据两个比例的差确定鼻子的横向转动程度。

5.根据权利要求4所述的方法，其特征在于，所述根据两个比例的差确定鼻子的横向转动程度具体实现为：

将所述两个比例的差规整到±20的区间内，从而得到鼻子的横向转动程度。

6.根据权利要求1至5中任意一项所述的方法，其特征在于，在预定周期内循环N次执行步骤A至步骤C，对获取的人眼注视点位置取平均，得到该预定周期内的人眼注视点位置。

7.根据权利要求2至6中任意一项所述的方法，其特征在于，该方法还包括：

如果预定时间内连续两次人脸的矩形子区域的位置超过一定幅度的左右或者上下摇摆，则分别判断产生摇头和点头动作。

8.根据权利要求7所述的方法，其特征在于，还包括：在判定产生摇头或者摆头动作后，记录动作产生的时间。

9.一种采用目光捕捉的人机交互方法，其特征在于，包括：

采用如权利要求1至8中任意一项所述的目光捕捉的方法得到的人眼的注视点位置；

将所述人眼的注视点位置发送至上层应用程序。

10.一种采用目光捕捉的人机交互方法，其特征在于，包括：

采用如权利要求7或8所述的目光捕捉的方法判断产生摇头或点头动作；

将产生摇头或点头的动作信息发送至上层应用程序。