[发明专利]用于凝视和姿势接口的系统和方法

摘要

本发明涉及一种由用户激活和与显示在3D计算机显示器上的至少一个3D对象交互的系统和方法，其中至少通过用户的、可以与用户对3D计算机显示器的凝视结合的姿势来进行激活和交互。在第一示例中，3D对象是3DCAD对象。在第二示例中，3D对象是径向菜单。用户的凝视由用户所佩戴的、包括至少一个内部照相机和外部照相机的头部框架捕获。用户的姿势由照相机捕获并且从多个姿势中被识别出。用户的姿势由传感器捕获，并且相对于3D计算机显示器进行标定。

主权项

一种用于由佩戴具有瞄准人员的眼睛的第一内部照相机的头部框架的人员通过以眼睛凝视3D图像和以身体部分做出姿势来与显示在显示器上的3D对象交互的方法，所述方法包括：以至少两个照相机感测所述眼睛的图像、所述显示器的图像和所述姿势的图像，安装在所述头部框架中的至少两个照相机中的一个是第一外部照相机，适于指向所述显示器，并且所述至少两个照相机中的另一个是所述第一内部照相机；将所述眼睛的图像、所述姿势的图像和所述显示器的图像传送给处理器；所述处理器根据这些图像确定所述眼睛的视向和所述头部框架相对于所述显示器的位置，并且然后确定所述人员正在凝视的3D对象；所述处理器根据所述姿势的图像从多个姿势中识别出所述姿势；以及所述处理器基于所述凝视、或所述姿势、或所述凝视和所述姿势进一步处理所述3D对象。