[发明专利]增强设备

说明书

具体实施使用第一设备(例如，HMD)来提供CGR环境，该CGR环境增强第二设备(例如，膝上型计算机、智能扬声器等)的输入能力和输出能力。在一些具体实施中，第一设备在其接近物理环境中与第二设备通信以交换输入或输出数据。例如，HMD可捕获包括膝上型计算机的物理环境的图像。HMD可检测膝上型计算机，发送对膝上型计算机的内容的请求，接收来自膝上型计算机的内容(例如，膝上型计算机当前正在显示的内容和附加内容)，识别膝上型计算机的位置，并且在膝上型计算机上或附近的CGR环境中显示具有所接收的内容的虚拟对象。虚拟对象(例如，虚拟监测仪或监测仪扩展)的大小、形状、取向或位置也可被配置为提供更好的用户体验。

技术领域

本公开整体涉及在电子设备上提供内容，并且具体地涉及提供计算机生成现实(CGR)环境的系统、方法和设备，该CGR环境基于包括其他电子设备的物理环境。

背景技术

许多电子设备都配置有输入和输出能力。例如，膝上型计算设备可包括显示器和键盘，该显示器和键盘分别用于显示内容和接收用户输入。类似地，智能手表可包括触摸屏，该触摸屏既显示内容又接收输入。在另一个示例中，智能家庭扬声器设备可被配置为经由扬声器产生音频输出以及经由麦克风接收可听语音命令作为输入。附加设备可用于补充电子设备的输入和输出能力。例如，用户可将较大监测仪连接到膝上型计算机或使用头戴式设备(HMD)来查看对应于膝上型计算机的输出的虚拟屏幕(例如，虚拟桌面)。然而，使用一个设备来补充另一设备的输出或输入能力的现有技术可能在能力、可用性或效率方面受到限制，并且通常可能无法提供足以增强那些电子设备的输入和输出能力的用户体验。

发明内容

本文公开的具体实施使用第一设备来提供CGR环境，该CGR环境增强第二设备的输入和输出能力。在一些具体实施中，第一设备(例如，头戴式设备(HMD))提供CGR环境，该CGR环境包括物理环境的视图，该物理环境包括一个或多个其他电子设备，例如，膝上型计算机、电视、智能扬声器、移动设备、手表、智能扬声器、物联网(IOT)设备等。HMD增强存在于物理环境中的检测到的内容产生电子设备的输出或输入能力。在一些具体实施中，第一设备(例如，HMD)与物理环境中的设备通信以交换输入或输出数据。例如，HMD可捕获包括膝上型设备的物理环境的图像。HMD可检测膝上型设备，向膝上型计算机发送对内容的请求，从膝上型计算机接收视觉内容(例如，当前处于膝上型计算机的物理显示器上的内容和附加内容)，并且在膝上型计算机视图上或附近显示CGR环境中的虚拟对象。例如，HMD可显示包括该内容或附加内容的虚拟对象。虚拟对象基于膝上型计算机的位置定位在CGR环境中。例如，CGR环境可包括物理环境的视图，其中虚拟监测仪定位在膝上型计算机的真实显示器的位置处、周围或如若不然基于该位置定位。例如，HMD可在虚拟屏幕上显示膝上型计算机的当前内容和附加内容，该虚拟屏幕大于实际屏幕并且基于实际屏幕的位置定位在CGR环境中。

在一些具体实施中，电子设备使用处理器来执行方法，该方法使用第一设备来提供CGR环境，该CGR环境增强第二设备的输入和输出能力。该方法涉及获得物理环境的图像(例如，用于视频透传的视频)以及识别物理环境中的第二设备。例如，可经由基于接近度的检测或计算机视觉来检测第二设备。该方法呈现CGR环境，该CGR环境包括图像的至少一部分的视图并且增强第二设备的输出能力或输入能力。

在一些示例中，该方法可识别与第二设备产生的用于在第二设备的显示器上显示的视觉内容相对应的增强内容，并且可基于第二设备的显示器的位置将具有该增强内容的虚拟屏幕定位在CGR环境中。虚拟屏幕可在大小、形状或取向方面与第二设备的显示器不同，以改善用户体验。

在一些示例中，第二设备显示没有视点依赖外观(例如，没有实际光亮或反射或基于用户或设备移动而出现的其他改变)的内容，并且方法生成或识别对应的增强内容，该对应的增强内容相反具有视点依赖外观(例如，外观会由于用户或设备移动而改变的内容)。例如，金属可基于假设的查看位置而显示在具有固定外观的膝上型计算机监测仪上，并且相反，金属可显示在HMD上的虚拟监测仪上，该HMD提供外观随着用户或膝上型计算机相对于彼此移动(例如基于改变的反射)而变化的CGR环境。