[发明专利]使用结构光的眼睛追踪有效
申请号: | 201680063458.9 | 申请日: | 2016-11-01 |
公开(公告)号: | CN108351514B | 公开(公告)日: | 2019-11-22 |
发明(设计)人: | 尼古拉斯·丹尼尔·特雷尔;罗伯特·戴尔·卡文 | 申请(专利权)人: | 脸谱科技有限责任公司 |
主分类号: | G02B27/00 | 分类号: | G02B27/00;G02B27/01;G06F3/01 |
代理公司: | 11240 北京康信知识产权代理有限责任公司 | 代理人: | 梁丽超;田喜庆<国际申请>=PCT/US |
地址: | 美国加利*** | 国省代码: | 美国;US |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用户眼睛 结构光 眼睛追踪系统 失真 照射 结构光发射器 头戴式显示器 虚拟现实系统 图案 红外结构光 结构光图案 校准结构 眼睛表面 眼睛追踪 光系统 入射 投射 捕获 照相机 视点 图像 追踪 | ||
1.一种眼睛追踪单元,包括:
结构光的发射器,被配置为以结构光图案照射用户的眼睛,其中,所述结构光图案在所述眼睛的表面的一部分上产生失真的照射图案;
照相机,被配置为捕获与所述眼睛的表面的一部分相关联的所述失真的照射图案的图像;以及
眼睛方位估计模块,被配置为基于由所述照相机捕获的图像和所述眼睛的模型来估计所述眼睛的方位,其中,估计所述眼睛的方位包括:
估计所述眼睛的瞳孔中心轴的方向;以及
基于估计的所述瞳孔中心轴的方向并且基于所述瞳孔中心轴与所述眼睛的凹轴之间的偏移,来估计所述凹轴的方向。
2.根据权利要求1所述的眼睛追踪单元,其中,所述眼睛追踪单元是头戴式显示器(HMD)的组件,所述HMD包括:
显示元件,被配置为向佩戴所述HMD的用户显示内容;以及
光学块,被配置为引导来自所述显示元件的光至所述HMD的出射光孔。
3.根据权利要求1所述的眼睛追踪单元,还包括校准模块,所述校准模块被配置为:
控制显示元件,以在所述显示元件上在一位置处显示视觉指示器;
从所述照相机接收由所述发射器投射到所述眼睛上的第二失真照射图案的第二图像;以及
基于捕获的所述第二图像并且基于所述视觉指示器的所述位置训练用户的所述眼睛的所述模型。
4.根据权利要求1所述的眼睛追踪单元,其中,所述眼睛方位估计模块被配置为:
基于在所述图像中捕获的所述照射图案中的失真来确定所述眼睛的表面的所述部分的形状;以及
比较所述眼睛的模型与确定的所述眼睛的表面的所述部分的形状。
5.根据权利要求1所述的眼睛追踪单元,其中,所述眼睛方位估计模块被配置为:
检测捕获的所述图像中的多个照射点中的每个照射点的位置;
基于所述失真的照射图案在捕获的所述图像中的位置与在所述结构光图案中的所述照射点自所述发射器的对应角的比较,确定每个照射点的三维位置;以及
比较所述眼睛的模型与确定的所述照射点的三维位置。
6.根据权利要求1所述的眼睛追踪单元,其中,所述眼睛方位估计模块被配置为:部分地基于对所述眼睛的特征的位置进行检测来估计所述眼睛的方位,其中,基于捕获的所述图像和所述眼睛的模型来进行所述检测,所述特征选自由角膜的曲率、角膜-巩膜界面、所述角膜之下的虹膜特征、以及所述角膜的顶点组成的组。
7.根据权利要求1所述的眼睛追踪单元,其中,所述眼睛方位估计模块被配置为部分地基于确定眼睛的偏转、俯仰和滚转转动以及所述眼睛的三维移位矢量来估计所述眼睛的方位。
8.根据权利要求1所述的眼睛追踪单元,其中,所述结构光图案选自由点矩阵、正弦曲线、单线或多线片段、以及多色调图案组成的组。
9.根据权利要求1所述的眼睛追踪单元,其中,所述结构光图案包括红外光,并且其中,所述照相机是红外照相机。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于脸谱科技有限责任公司,未经脸谱科技有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201680063458.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:用于场成像和/或光瞳成像的光学系统
- 下一篇:眼睛投影系统和方法