[发明专利]用于基于凝视跟踪生成虚拟标记的系统和方法有效
申请号: | 201780005799.5 | 申请日: | 2017-03-29 |
公开(公告)号: | CN108604125B | 公开(公告)日: | 2021-08-27 |
发明(设计)人: | 路易斯·詹姆斯·马格拉夫;尼尔森·G·普布利科弗;斯潘塞·詹姆斯·康诺顿 | 申请(专利权)人: | 谷歌有限责任公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01;G06F3/033;G06F3/0354;G06F3/03 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 李佳;穆德骏 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 基于 凝视 跟踪 生成 虚拟 标记 系统 方法 | ||
1.一种用于生成虚拟标记的方法,包括:
由处理单元基于由第一场景相机捕获的图像,跟踪第一指示器的尖端相对于书写表面的位置和运动;
由第一面向用户的相机捕获第一用户的眼睛图像;
使用来自由所述第一面向用户的相机捕获的眼睛图像的反光数据来确定所述第一用户的眼睛的相对凝视方向;
使用根据由所述第一面向用户的相机捕获的一系列眼睛图像所确定的眼睛位置数据,通过应用算法过滤器,对扫视与平滑追随眼睛运动进行过滤,以识别和区分扫视和平滑追随眼睛运动的存在;
基于识别和区分扫视或平滑追踪眼睛运动的存在来确定所述第一用户的眼睛是否聚焦在和/或跟随所述第一指示器的尖端;以及
由所述处理单元基于所跟踪的所述第一指示器的尖端相对于所述书写表面的位置和运动并且基于确定所述第一用户的眼睛正凝视所述第一指示器的尖端,在显示器处记录所述书写表面上的所述第一指示器的第一标记。
2.如权利要求1所述的方法,其中,记录所述标记是基于所述第一指示器接触所述书写表面。
3.如权利要求1所述的方法,其中,记录所述标记包括:在所述书写表面上沉积虚拟墨水。
4.如权利要求3所述的方法,还包括:
基于所述第一指示器的尖端继续接触所述书写表面并基于所确定的所述第一用户的眼睛的注视,继续沉积虚拟墨水,所述虚拟墨水与所述第一指示器的尖端的所跟踪的运动相对应;
当所述第一用户的眼睛停止凝视所述第一指示器的尖端时,停止沉积所述虚拟墨水。
5.如权利要求1所述的方法,其中,所述第一指示器包括虚拟对象。
6.如权利要求1所述的方法,其中,所述书写表面包括虚拟表面。
7.如权利要求1所述的方法,进一步包括:
由所述处理单元基于由第二场景相机捕获的图像,跟踪第二指示器相对于所述书写表面的运动;
由所述处理单元基于由第二面向用户的相机捕获的图像,跟踪第二用户的眼睛的凝视;以及
由所述处理单元基于所跟踪的所述第二指示器相对于所述书写表面的运动并且基于所跟踪的所述第二用户的眼睛的凝视,在所述显示器处记录所述书写表面上的所述第二指示器的标记。
8.如权利要求1所述的方法,其中,记录所述标记包括:响应于识别出所述第一指示器与所述书写表面接触,在与所述第一指示器的尖端的所确定运动相对应的所述书写表面处沉积虚拟墨水。
9.如权利要求1所述的方法,进一步包括:响应于识别出所述第一指示器的尖端未与所述书写表面接触而中断记录所述标记,以及响应于识别出所述第一指示器的尖端已与所述书写表面重新接触而恢复记录所述标记。
10.如权利要求1所述的方法,进一步包括:
利用所述场景相机跟踪擦除器相对于所述书写表面的运动;以及
响应于识别出所述擦除器与所述书写表面接触以及所述第一用户的眼睛的凝视聚焦在所述擦除器上,擦除所述标记中与所跟踪的所述擦除器的运动相对应的至少一部分。
11.如权利要求10所述的方法,其中,所述擦除器包括虚拟擦除器。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于谷歌有限责任公司,未经谷歌有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201780005799.5/1.html,转载请声明来源钻瓜专利网。