[发明专利]现实世界对象的虚拟表示

说明书

描述了用于在增强现实环境内生成虚拟代理对象并控制虚拟代理对象的位置的方法。在一些实施例中，头戴式显示设备(HMD)可标识为其生成虚拟代理对象的现实世界对象、生成与该现实世界对象相对应的虚拟代理对象并使用HMD显示该虚拟代理对象，使得该虚拟代理对象被感知为存在于向HMD的终端用户显示的增强现实环境内。在一些情况下，图像处理技术可被应用于由嵌入在HMD内的深度相机得到的深度图像，以便标识现实世界对象的边界点，并确定与现实世界对象相对应的虚拟代理对象的维度。

背景

增强现实(AR)涉及提供经增强的现实世界环境，其中用计算机生成的虚拟数据来增强或修改对现实世界环境(或表示现实世界环境的数据)的感知。例如，可使用诸如相机或话筒等传感输入设备实时地捕捉表示现实世界环境的数据，并用包括虚拟图像和虚拟声音的计算机生成的虚拟数据来增强该数据。虚拟数据还可包括与现实世界环境有关的信息，诸如与现实世界环境中的现实世界对象相关联的文本描述。一些AR环境内的对象可包括现实对象(即，存在于特定现实世界环境中的对象)和虚拟对象(即，不存在于该特定现实世界环境中的对象)。

为了将虚拟对象逼真地集成到AR环境中，AR系统可执行包括映射和本地化在内的若干任务。映射涉及生成现实世界环境的映射的过程。本地化涉及相对于现实世界环境的映射来定位特定视点或姿态的过程。在一些情况下，AR系统可实时本地化在现实世界环境内移动的移动设备的姿态，以便确定要随该移动设备在现实世界环境中移动而被增强的与该移动设备相关联的特定视图。

概述

描述了用于提供交互式增强现实环境的技术，在该交互式增强现实环境中，虚拟代理对象可被自动地生成，并随后由头戴式显示设备(HMD)的终端用户来控制。在一些实施例中，HMD可标识要为其生成虚拟代理对象的现实世界对象，生成与现实世界对象相对应的虚拟代理对象，并使用HMD来显示该虚拟代理对象使得该虚拟代理对象被感知为存在于向HMD的终端用户显示的增强现实环境内。虚拟代理对象在增强现实环境内的位置可由终端用户使用姿势或音频命令(例如，经由手势或语音命令)来控制。在一些情况下，图像处理技术(例如，特征检测、边缘检测、分段等)可被应用于从嵌入在HMD内的深度相机得到的深度图像和/或从嵌入在HMD内的RGB相机得到的彩色图像，以便标识现实世界对象的边界点并确定与现实世界对象相对应的虚拟代理对象的各维度。

提供本概述以便以简化的形式介绍以下在详细描述中进一步描述的一些概念。本概述并非旨在标识出要求保护的主题的关键特征或必要特征，亦非旨在用作辅助确定要求保护的主题的范围。

附图简述

图1是可在其中实施所公开的技术的联网计算环境的一个实施例的框图。

图2A描绘了与第二移动设备通信的移动设备的一个实施例。

图2B描绘了HMD的一部分的一个实施例。

图2C描绘了HMD的一部分的一个实施例，其中延伸到注视点的注视向量被用于对准远瞳距(IPD)。

图2D描绘了HMD的一部分的一个实施例，其中延伸到注视点的注视向量被用于对准近瞳距(IPD)。

图2E描绘了HMD的一部分的一个实施例，该HMD具有包括凝视检测元件的可移动显示光学系统。

图2F描绘了HMD的一部分的一个替换实施例，该HMD具有包括凝视检测元件的可移动显示光学系统。

图3描绘了包括捕捉设备和计算环境的计算系统的一个实施例。

图4A描绘了其中可安置一个或多个现实世界对象的环境的一个实施例。

图4B描绘了其中第一虚拟代理对象已被适配在桌子上的增强现实环境的一个实施例。