[发明专利]用于扩展现实显示的基于理解力和意图的内容

说明书

技术领域

本发明涉及扩展现实显示，尤其是用于扩展现实显示的基于理解力和意图的内容。

本发明的背景技术

扩展现实是一种允许将虚拟图像与现实世界物理环境或空间相混合的技术。通常，用户佩戴近眼显示器以查看虚拟物体和现实物体的混合图像。一般而言，近眼显示器使用光学器件与立体视觉的组合来将虚拟图像聚焦到空间内。

在某些情况下，通过近眼显示设备向用户所显示的虚拟图像可能包括包含高度精细图形的虚拟图像或物体。然而，通常是移动的近眼显示设备往往受限于计算资源，并且可能无法准确地将虚拟图像呈现给用户。另外，通常向佩戴近眼显示设备的用户呈现该用户不一定有兴趣查看的大量信息。

发明内容

此处公开了在使用诸如透视显示设备或头戴式显示设备之类的近眼显示设备时，通过优化显示给用户的可视化信息来增强用户体验的方法和系统。通过对显示给用户的可视化信息区分优先级来优化可视化信息。在一种方法中，通过确定用户与用户环境中一个或多个物体进行交互的所推断或表达的意图来对可视化信息区分优先级。在一个实施例中，基于区分了优先级的可视信息来生成经优化的图像。经优化的图像视觉上增强用户环境中用户打算与之进行交互的物体的外观，和/或缩小用户环境中用户不打算与之进行交互的物体的外观。在一种方法中，通过分析用户的眼睛移动以及用户对用户环境中物体的注视强度来确定用户的意图。在另一种方法中，基于与用户有关的用户专用信息来自动地确定用户的意图。在一个实施例中，经优化的图像减少了头戴式显示设备在处理并将可视化信息呈现给用户中所需的计算资源。

在所公开的技术的另一个实施例中，通过自动地增强用户环境中的一个或多个物体来提高用户对用户环境中可视化信息的理解力。在一个实施例中，生成视觉上增强提高用户理解力的一个或多个物体的外观的经优化的图像。在另一个实施例中，确定用户与经优化的图像中一个或多个视觉上已增强的物体进行交互的意图。

在一个实施例中，提供用于基于扩展现实系统中的用户意图来生成经优化的图像的方法。在一种方法中，该方法包括确定用户使用透视显示设备正在查看的场景中的感兴趣的物体或人。确定用户的视野。视野是用户正在查看的空间或环境的一部分。确定视野内的用户的聚焦区。确定用户与用户的聚焦区中的一个或多个物体或人进行交互的意图。在一个实施例中，基于用户的意图来为用户生成经优化的图像。经优化的图像经由透视显示设备显示给用户。

提供本发明内容以便以简化的形式介绍将在以下详细描述中进一步描述的一些概念。本发明内容并不旨在标识出所要求保护的主题的关键特征或必要特征，也不旨在用于帮助确定所要求保护的主题的范围。此外，所要求保护的主题不限于解决在本发明的任一部分中提及的任何或所有缺点的实现。

附图说明

图1是描绘用于基于用户意图生成经优化的内容的系统的一个实施例的示例组件的框图。

图2是头戴式显示单元的一个实施例的一部分的俯视图。

图2A-2E提供示出不透明度滤光器的操作的示例图像。

图3是头戴式显示单元的组件的一个实施例的框图。

图4是与头戴式显示单元相关联的处理单元的组件的一个实施例的框图。

图5是结合头戴式显示单元使用的中枢计算系统的组件的一个实施例的框图。

图6是可用于实现在此所述的中枢计算系统的计算系统的一个实施例的框图。

图7是描绘用于基于用户意图来生成经优化的内容的多用户系统的框图。

图8描述了用于基于用户意图生成经优化的内容的过程的一个实施例。

图9描述了用户创建用户的空间的模型的过程的一个实施例。

图10是描述了用于将空间的模型分割成物体的过程的一个实施例的流程图。

图11A是描述用于标识物体的过程的一个实施例的流程图。

图11B是描述用于响应于移动物体来更新图8的过程所创建的模型的过程的一个实施例的流程图。

图12是描述用于跟踪用户的视野以及确定用户的聚焦区的过程的一个实施例的流程图。

图13A是描述了由中枢计算系统执行以提供图12的过程中使用的跟踪信息的过程的一个实施例的流程图。

图13B是描述了用于跟踪眼睛的过程的一个实施例的流程图，其中该过程的结果供图12的过程来使用。

图14是描述用于确定用户与用户聚焦区中一个或多个物体进行交互的意图的过程的一个实施例的流程图。