[发明专利]对象全息增强

说明书

用于使用混合现实设备来增强真实世界对象的设备、系统和方法，涉及：捕获图像数据，图像数据用于由混合现实设备观测到的物理空间中包括的真实世界对象；基于图像数据，将真实世界对象自动地分类为与对象分类相关联；基于真实世界对象与对象分类相关联，自动地标识软件应用；将软件应用与真实世界对象相关联；以及与真实世界对象相关联地，在混合现实设备上执行软件应用。

背景技术

许多消费者电子设备，诸如“物联网”类型的设备，包括有限的或者没有显示器和/或用户输入硬件。替代地，这样的设备依赖于对其他系统的使用来完全控制或以其他方式实现它们的能力。例如，许多IoT类型的设备依赖于对智能电话和定制智能电话应用的使用来与它们交互和控制它们。正确地标识并且然后成功地安装和配置这样的应用经常是不确定和/或冗长的过程。即使在设备已经与智能电话应用成功地配对之后，诸如必须为显著数目的设备安装单独的应用、为特定设备访问适当的应用、以及智能电话形状因子和界面上的限制等体验也是冗长且复杂的。这样的因素对于这样的设备的广泛采用造成了显著障碍。

发明内容

用于混合现实设备的系统被公开。该系统可以包括一个或多个面向外的图像传感器，该一个或多个面向外的图像传感器被包括在混合现实设备中并且被配置为：捕获第一图像数据，第一图像数据用于由混合现实设备观测到的物理空间中包括的第一真实世界对象。该系统还可以包括：对象分类器，被配置为基于所捕获的第一图像数据，将第一真实世界对象自动地分类为与第一对象分类相关联；以及应用标识器，被配置为基于第一真实世界对象与第一对象分类相关联，自动地标识第一软件应用。另外，该系统可以包括控制器，控制器被配置为：存储将第一软件应用与第一真实世界对象相关联的数据；以及与第一真实世界对象相关联地，在混合现实设备上执行第一软件应用。

在另一方面，用于使用混合现实设备来增强真实世界对象的方法被公开。该方法可以包括：捕获第一图像数据，第一图像数据用于由混合现实设备观测到的物理空间中包括的第一真实世界对象；以及基于第一图像数据，将第一真实世界对象自动地分类为与第一对象分类相关联。该方法还可以包括：基于第一真实世界对象与第一对象分类相关联，自动地标识第一软件应用；将第一软件应用与第一真实世界对象相关联；以及与第一真实世界对象相关联地，在混合现实设备上执行第一软件应用。

该概述被提供来以简化的形式介绍概念的选集，这些概念在下文在详细描述中进一步被描述。该概述不旨在标识所要求保护的主题的关键特征或必要特征，也不旨在用于限制所要求保护的主题的范围。此外，所要求保护的主题不限于解决在本公开的任何部分中指出的任何或所有缺点的实施方式。

附图说明

附图通过仅示例的方式，而非通过限制的方式描绘了根据本教导的一个或多个实施方式。在附图中，相似的参考标号指代相同或类似的元素。

图1A图示了混合现实(MR)设备的示例，并且图1B图示了图1A中图示的MR设备的框图。

图2图示了用户在具有多个真实对象的物理空间中时佩戴MR设备的示例。

图3图示了用于与图2中图示的MR设备一起使用的处理环境和相关系统的示意性示例。

图4图示了用于使用在MR设备上执行的软件应用来增强真实世界对象的方法和/或过程的示例。

图5图示了用户在具有多个真实对象的物理空间中时佩戴MR设备的示例，其中针对真实对象中的一些真实对象，视觉指示符被显示给用户。

图6图示了用户利用指示符来选择对象的示例。

图7图示了虚拟菜单被显示给用户的示例。

图8图示了软件应用被显示给用户的示例。

图9图示了处于第一位置的第一对象的示例，其具有与第一真实世界对象相关联的软件应用所提供的图形虚拟界面。

图10图示了具有其图形虚拟界面的处于第二位置的图9中示出的第一对象的示例。