[发明专利]用于基于凝视跟踪生成虚拟标记的系统和方法

说明书

电子系统基于指示器的尖端与表面的接近度和用户眼睛的凝视，在显示器上与指示器相对于表面的跟踪运动相对应来生成虚拟书写。电子系统基于由场景相机捕获的图像来确定指示器的尖端相对于表面的运动，并且基于由面向用户的相机捕获的图像来确定用户的眼睛的焦点和凝视方向。通过基于指示器的尖端与表面的接近度并且基于用户的眼睛的焦点和凝视方向在显示器处与所跟踪的指示器的运动相对应来生成虚拟书写，电子系统可以实现虚拟书写和相关联的协作服务，而无需专门的书写表面或指示器。

相关申请的交叉引用

本申请涉及并且要求下述共同未决申请的优先权，其全部内容在此引入以供参考：美国临时专利申请序列号No.62/314,872(代理人案卷号No.1500-G16029)，名为“Methods and Systems for Wearable Writing and Drawing(用于可穿戴书绘的方法和系统)”。

技术领域

本公开大体涉及影像(imagery)捕获和处理，更具体涉及使用捕获的影像的虚拟书写和绘画。

背景技术

传统上，电子书写和绘画以及在这类活动中与其他人合作是使用在诸如触敏(电容)屏幕的表面上的诸如笔、铅笔和触控笔的书写工具来执行的。最近，智能笔被开发用于辨识书写表面中的微结构以确定智能笔相对于书写表面的位置。但是，在这两种情况下，用户必须能使用与书写工具或智能笔兼容的表面。

附图说明

通过参考附图，可以更好地理解本公开，并且其许多特征和优点对于本领域技术人员变得显而易见。在不同的图中使用相同的附图标记表示相似或相同的项目。

图1是示出根据本公开的至少一个实施例的电子系统的图，该电子系统被配置为生成与基于指示器的末端与书写表面的接近度以及用户的眼睛的凝视的、所跟踪的指示器的末端相对于书写表面的运动相对应的标记。

图2是示出根据本公开的至少一个实施例的、图1的电子系统的实施例的图，其中，指示器是手指并且标记是字母。

图3是示出根据本公开的至少一个实施例的、图1的电子系统的实施例的图，其中，指示器是笔并且标记是图。

图4是示出根据本公开的至少一个实施例的、图1的电子系统的实施例的图，其中，指示器是与多个表面交互的手指。

图5是示出根据本公开的至少一个实施例的、图1的电子系统的实施例的图，其中，指示器是笔并且表面是笔记本。

图6是示出根据本公开的至少一个实施例的、图1的电子系统的操作以基于指示器的尖端与表面的接近度并且基于所跟踪的用户的眼睛的凝视来跟踪指示器相对于表面的运动并且在显示器上与所跟踪的指示器的运动相对应记录标记的流程图。

具体实施方式

下述描述旨在通过提供涉及以下的多个具体实施例和细节来传达对本公开的透彻理解：与基于指示器的尖端与表面的接近度和用户的眼睛的凝视的、所跟踪的指示器的尖端相对于表面的运动相对应的虚拟书写和绘图。“书写”指代形成标记的所有方式，包括刻写(inscribing)、涂画(painting)、绘画(drawing)、雕刻(engraving)、素描(sketching)和描画(outlining)。因此，除了形成字母、符号和单词之外，书写可以指代绘图、创建略图、或形成计算机代码的过程。然而，应理解到，本公开不限于这些仅为示例的具体实施例和细节，因此本公开的范围旨在仅由所附权利要求书及其等同物限制。进一步理解到，本领域的普通技术人员鉴于已知的系统和方法，将意识到根据具体的设计和其他需要，在任何数目的替选实施例中，将本公开用于其意图的目的和益处。