[发明专利]用户界面菜单的情景感知

说明书

公开了可穿戴系统用来自动选择或筛选可用用户界面交互或虚拟对象的系统和方法的示例。可穿戴系统可以基于与用户、用户的环境，用户的环境中的物理对象或虚拟对象、或用户的生理状态或心理状态相关联的情景信息选择虚拟对象组以进行用户交互。

本申请是申请号为201780044955.9的中国专利申请的分案申请，原申请的申请日为2017年05月18日，优先权日为2016年05月20日，进入中国国家阶段的日期为2019年01月18日，发明名称为“用户界面菜单的情景感知”。

相关申请的交叉引用

本申请根据35U.S.C.§119(e)主张2016年5月20日提交的序列号为62/339,572的，名称为“CONTEXTUAL AWARENESS OF USER INTERFACE MENUS(用户界面菜单的情景感知)”的美国临时申请和2016年8月29日提交的序列号为62/380,869的，名称为“AUGMENTEDCOGNITION USER INTERFACE(增强认知用户界面)”的美国临时申请的优先权益，这些申请公开的全部内容在此通过引用并入此文。

技术领域

本公开涉及虚拟现实和增强现实成像和可视化系统，更具体地，涉及基于情景信息呈现和选择虚拟对象。

背景技术

现代计算和显示技术促进了用于所谓的“虚拟现实”、“增强现实”或“混合现实”体验的系统开发，其中数字再现图像或其一部分以看起来是真实的或可以被感知为真实的方式呈现给用户。虚拟现实或“VR”场景通常涉及呈现以对其它实际的真实世界视觉输入不透明的方式呈现数字或虚拟图像信息；增强现实或“AR”场景通常涉及将数字或虚拟图像信息呈现为对用户周围真实世界的可视化的增强。混合现实或“MR”涉及合并真实和虚拟世界以产生物理对象和虚拟对象共存并且实时交互的新环境。事实证明，人类视觉感知系统非常复杂，而且，开发促进虚拟图像元素在其它虚拟或真实世界图像元素当中舒适、感觉自然、丰富呈现的VR、AR或MR技术非常具有挑战性。本文公开的系统和方法解决了与VR、AR或MR技术相关的各种挑战。

发明内容

在一个实施例中，公开了一种用于在用户的三维(3D)环境中生成虚拟内容的可穿戴系统。该可穿戴系统可以包括增强现实显示器，该增强现实显示器被配置为在3D视图中向用户呈现虚拟内容；姿势传感器，该姿势传感器被配置为获取用户的位置或取向数据，并分析该位置或取向数据以识别该用户的姿势；硬件处理器，该硬件处理器被配置为与姿势传感器和显示器通信。该硬件处理器可以被编程为：至少部分地基于该用户的姿势识别3D环境中的用户的环境中的物理对象；接收用于启动与物理对象进行交互的指示；识别与物理对象相关联的用户的环境中的虚拟对象集；确定与物理对象相关联的情景信息；基于情景信息筛选虚拟对象集以从该虚拟对象集中识别虚拟对象子集；生成包括虚拟对象子集的虚拟菜单；至少部分地基于所确定的情景信息来确定用于呈现虚拟菜单的3D环境中的空间位置；以及通过增强现实显示器在空间位置处呈现虚拟菜单。

在另一实施例中，公开了一种用于在用户的三维(3D)环境中生成虚拟内容的方法。该方法可以包括分析从姿势传感器获取的数据以识别用户的姿势；至少部分地基于该姿势识别用户的3D环境中的可交互对象；接收用于启动与可交互对象的进行交互的指示；确定与可交互对象相关联的情景信息；基于情景信息从可交互对象上的可用用户界面操作集中选择用户界面操作子集；以及生成用于在3D视图中向用户呈现用户界面操作子集的指令。

在附图和以下描述中阐述了本说明书中描述的主题的一个或多个实施方式的细节。通过阅读说明书、附图和权利要求，其它特征、方面和优点将变得显而易见。本发明内容和以下具体实施方式并非旨在限定或限制本发明主题的范围。

附图说明

图1示出了具有由人观看到的某些虚拟现实对象和某些物理对象的混合现实场景的图示。

图2示意性地示出了可穿戴系统的示例。

图3示意性地示出了使用多个深度平面模拟三维图像的方法的各方面。