[发明专利]使用动作及语音命令的主机应用程序的高级远程控制

说明书

相关申请的交叉引用

本申请要求于2010年9月20日提交的美国临时申请号61/384,586的权益。通过引用将以上一项或多项申请的全部教导结合在此。

背景技术

本申请涉及人类/计算机接口，更具体地涉及一种接受语音命令并跟踪手势和/或头部运动的设备，以向如在本地或在远程主计算机上执行的软件提供输入。

能够存储和显示大量高分辨率计算机图形信息甚至视频内容的小型便携式电子设备继续越来越受欢迎。这些智能电话设备(如Apple iPhone^TM和Google Android^TM电话)代表了移动电话、便携式计算机和数字媒体播放器之间的融合的显著趋势。(iPhone是California的Cupertino的Apple Computer，Inc.的商标；Android是California的Mountain View的Google，Inc.的商标。)虽然这些设备通常包括显示屏，但是由于它们的物理尺寸的限制，高分辨率大幅面的显示器的视觉体验无法在此类设备中轻易地复制。

因此，消费者现在追求一种高品质、便携式、彩色显示器来加强他们的手持设备。一种此类设备是头戴式眼镜设备，其佩戴在用户的脸部或头部周围，类似一副眼镜或耳机。这些设备包括小型高分辨率微型显示器和放大图像的镜头。无线接口为此类设备提供了极大的便利性和移动性。该微型显示器可以提供超级视频图形阵列(SVGA)(800×600)分辨率，或者甚至扩展图形阵列(XGA)(1024×768)或更高的分辨率。如需有关此类显示器的更多信息，请参阅于2009年1月5日提交的美国申请第12/348,648号的标题为“用于控制其他系统和设备的移动无线显示软件平台(Mobile Wireless Display Software Platform for Controlling Other Systems and Devices)”以及于2009年3月27日提交的PCT国际申请第PCT/US09/38601号的标题为“具有适合用作移动互联网设备的高分辨率显示器的手持无线显示设备(Handheld Wireless Display Devices Having High Resolution Display Suitable for Use as Mobile Internet Device)”的共同未决的专利申请，其中每个文件的全部内容通过引用结合于此。

发明内容

便携式个人计算机有微型显示器、输入设备(如头部跟踪加速计)、一个或多个陀螺仪或检测运动(如头部运动、手部动作和/或姿势)的摄像机、多个检测语音命令的音频处理电路。这些组合的输入提供对在该设备本身上和/或在远程主处理器上运行的一个或多个操作系统和/或一个或多个应用程序的控制。

头戴式显示器(HMD)设备包括微型显示器。在一个实施例中，用于显示从本地处理器接收到的视觉信息。动作检测器检测用户的头部和/或身体部分的物理运动，以提供动作或姿势输入。麦克风提供音频信号，该音频信号被该本地处理器解释为语音命令。该本地处理器将文字、图形或其他用户提示叠加到该微型显示器上以指示将要激活某些命令的动作/姿势/语音输入。

该处理器将这些语音、动作或姿势输入或其组合转换成用户命令。该用户命令然后由操作系统或应用程序解释，以改变显示在该微型显示器上的信息的多个方面。这可以包括该本地处理器已经处理了该用户命令的视觉或音频确认。

附图说明

根据示例实施例的以下更具体的说明，上述内容将是清楚的，如在这些附图中展示的，其中贯穿这些不同的视图，相同的附图标记是指相同的部分。这些图不一定是按比例绘出，而是着重展示实施例。

图1是高层次图，示出了头戴式显示器(HMD)设备，以及使用手势和/或头部运动控制本地或远程计算机的行动的人。

图2A是使用头部条带的实施例。

图2B示出了可选的摄像机元件。

图3是该设备及到主机的可选连接的高层次方框图，展示了语音、手势和头部动作跟踪命令是如何被翻译的。

图4是该HMD设备的组件的更详细的图。

图5是到如Microsoft Windows桌面上的示例软件叠加，以向该用户指示可用的头部运动和语音命令。

图6是一组由一个或多个操作系统业务执行的功能。

图7是这个或这些业务保持的示例表。

图8是示例滚动列表。