[发明专利]用于注视跟踪模型的注视检测偏移

权利要求书

1.一种计算设备，包括：

包括图像传感器的眼睛跟踪系统；

逻辑设备；以及

包括指令的存储设备，所述指令能被所述逻辑设备执行以通过以下来跟踪眼睛注视方向：

经由所述眼睛跟踪系统获得所述眼睛的图像，

从所述眼睛的所述图像获得所述眼睛的晶状体的中心的所确定的位置，所述位置是在像素级别上确定的，

通过向所述眼睛的所述晶状体的中心的所确定的位置应用预定的亚像素偏移来在亚像素级别上调整所述眼睛的所述晶状体的所述中心的所确定的位置以产生所述晶状体的所述中心的经调整的位置，其中所述预定的亚像素偏移是基于可经机器训练的模型来确定的，所述模型使用训练数据集合来训练，所述训练数据集合包括多个眼睛图像帧和相应基础事实位置对，每个眼睛图像帧包括当注视目标被显示在显示器上所述相应基础事实位置处时捕捉人类眼睛的图像数据；

根据所述晶状体的所述中心的经调整的位置来确定注视方向；以及

基于所述注视方向在计算设备上执行动作。

2.如权利要求1所述的计算设备，其特征在于，所述图像传感器包括可见光相机，并且其中所述指令能被执行以通过确定所述眼睛的虹膜的边界以及基于所述虹膜的边界来确定所述虹膜的中心来确定所述晶状体的所述中心的所确定的位置。

3.如权利要求2所述的计算设备，其特征在于，所述指令进一步能被执行以向所述虹膜的所确定的中心应用所述亚像素偏移。

4.如权利要求1所述的计算设备，其特征在于，所述图像传感器包括红外相机，并且其中所述指令能被执行以通过确定所述眼睛的瞳孔的边界以及基于所述瞳孔的边界来确定所述瞳孔的中心来确定所述眼睛的所述晶状体的所述中心的所确定的位置。

5.如权利要求4所述的计算设备，其特征在于，所述指令进一步能被执行以向所述瞳孔的所确定的中心应用所述亚像素偏移。

6.如权利要求1所述的计算设备，其特征在于，所述指令进一步能被执行以接收关于注视方向和用户界面上的预期交互位置之间的差错的反馈，以及基于所述反馈调整所述预定亚像素偏移。

7.如权利要求6所述的计算设备，其特征在于，所述反馈包括指示不正确的注视确定的用户输入。

8.一种在计算设备上确定在计算机实现的注视跟踪中使用的亚像素偏移以减少使用所述注视跟踪的用户界面交互的差错率的方法，所述方法包括：

获得训练数据集合，所述训练数据集合包括多个眼睛图像帧和相应基础事实位置对，每个眼睛图像帧包括当注视目标被显示在显示器上所述相应基础事实位置处时捕捉人类眼睛的图像数据；

对于每个对，通过以下操作执行差错分析：

确定在所述眼睛图像数据帧中捕捉的眼睛的晶状体的中心，

经由包括一个或多个加权因子的集合的模型来确定要应用到所述晶状体的所确定的中心的亚像素偏移，其中所述模型是使用所述训练数据集合来训练的可经机器训练的模型，

向所述眼睛的所述晶状体的所确定的中心应用所述亚像素偏移以确定经调整的晶状体中心，

使用所述经调整的晶状体中心确定注视方向，以及

基于针对所述对的基础事实位置在应用所述亚像素偏移之后确定所述注视方向中的差错；

调整所述一个或多个加权因子来产生经调整的模型，以及针对经调整的模型重复所述差错分析；

确定产生所述注视方向中的最低的所确定的差错的所述一个或多个加权因子的所选集合；

确定与所述一个或多个加权因子的所述所选集合相对应的所选亚像素偏移，以及

提供所选亚像素偏移以在注视跟踪中使用。

9.如权利要求8所述的方法，其特征在于，所述模型是第一模型且一个或多个加权因子的所述集合是第一加权因子集合，所述方法进一步包括对具有第二加权因子集合的第二模型执行所述差错分析。