[发明专利]增强的虚拟触摸板和触摸屏

权利要求书

1.一种方法，包括：

由计算机在耦接至所述计算机的显示器上呈现多个交互项；

接收指示所述计算机的用户的凝视方向的输入，

其中接收所述输入包括：接收至少包含所述用户的头部的初始3D图；接收至少包含所述用户的眼睛的二维2D图像；从所述初始3D图和所述2D图像提取所述头部的3D坐标；以及基于所述头部的所述3D坐标和所述眼睛的所述2D图像来识别所述凝视方向；

响应于所述凝视方向，选择所述多个交互项中的一个；

继选择所述交互项中的所述一个之后，接收至少包含所述用户的手的三维3D图的序列；

分析所述3D图以检测由所述用户所执行的手势；以及

响应于所述手势来对所选择的交互项执行操作。

2.根据权利要求1所述的方法，其中所检测到的手势包括当所述手与物理表面接触时由所述手所执行的二维手势。

3.根据权利要求2所述的方法，其中所述物理表面被配置为选自包括触摸板、触摸屏、键盘和鼠标的列表的虚拟表面。

4.根据权利要求2所述的方法，进一步包括响应于所述二维手势来将图像投射在所述表面上。

5.根据权利要求1-4中任一项所述的方法，进一步包括响应于包括按压和保持手势的所检测到的手势而在显示器上呈现针对所选择的交互项的上下文信息。

6.根据权利要求1-4中任一项所述的方法，进一步包括响应于包括轻击手势的所检测到的手势来执行与所选择的交互项相关联的操作。

7.根据权利要求1-4中任一项所述的方法，进一步包括响应于包括滑动以拖动手势的所检测到的手势而在显示器上滚动所选择的交互项。

8.根据权利要求1-4中任一项所述的方法，进一步包括响应于选自包括轻扫手势和选择手势的列表的所检测到的手势来将任务切换至与所选择的交互项相关联的应用程序。

9.根据权利要求1-4中任一项所述的方法，进一步包括响应于选自包括捏合手势和抓取手势的列表的所检测到的手势而在显示器上改变所选择的交互项的大小。

10.根据权利要求1-4中任一项所述的方法，进一步包括响应于包括从边缘轻扫手势的所检测到的手势而在执行中的应用程序之间进行切换。

11.根据权利要求1-4中任一项所述的方法，进一步包括响应于包括从边缘轻扫手势的所检测到的手势而在显示器上呈现隐藏菜单。

12.根据权利要求1-4中任一项所述的方法，进一步包括响应于包括旋转手势的所检测到的手势而在显示器上呈现所选择的交互项的旋转。

13.根据权利要求1-4中任一项所述的方法，进一步包括识别由所述用户的所述手所保持的对象的颜色，并且使用所述颜色以用于在显示器上呈现内容。

14.根据权利要求1-4中任一项所述的方法，其中三维图的所述序列至少包含物理表面、定位在所述物理表面上的一个或多个物理对象、以及定位在所述物理表面附近的所述手，并且所述方法还包括响应于所述手势来将动画投射到所述物理表面上，以及将所述一个或多个物理对象结合到所述动画中。

15.根据权利要求14所述的方法，进一步包括投射包含所述一个或多个物理对象中的每一个物理对象的相应轮廓图像，并将所述相应轮廓图像结合到所述动画中。