[发明专利]用于检测用作虚拟衬底的平面和/或四叉树的方法和设备

说明书

一种电子设备：在电子设备的显示器上以第一外观状态显示覆盖在电子设备的图像传感器的视场中的对象的媒体捕获预览上的标线片元件，其中媒体捕获预览随着图像传感器的视场中的对象变化而变化；检测媒体捕获预览中的平面；并且响应于检测到平面，在显示器上以第二外观状态显示覆盖在媒体捕获预览上的标线片元件，其中当以第二外观状态显示时，标线片元件对应于平面的范围的一部分的指示。一种电子设备：获得多组图像；针对多组图像中的每一组合成三维点云；使用相应的三维点云构建平面；并且生成一组合并的四叉树，其表征三维点云上的一组合并的平面。

技术领域

本发明整体涉及检测场景内的平面和/或四叉树，包括但不限于使得所检测到的平面和/或四叉树被视为虚拟衬底的电子设备。

背景技术

将增强现实/虚拟现实(AR/VR)对象放置在未映射或动态场景中至少从用户体验的角度提出了挑战。如果AR/VR对象被放置到没有适当虚拟衬底的场景当中，那么AR/VR对象可能未被锚定到场景中的现实世界表面。如此，AR/VR可能漂浮在半空中，遮蔽现实世界对象或者与现实世界对象发生冲突。这会产生既不逼真也不可信的糟糕的用户体验。

在下面描述的实施方案中，通过检测场景内的平面或四叉树并确定其范围以便提供放置AR/VR对象的虚拟衬底来解决该挑战。

发明内容

根据一些实施方案，在具有一个或多个处理器、非暂态存储器、图像传感器、显示器以及一个或多个输入设备的电子设备处执行一种方法。该方法包括在显示器上以第一外观状态显示覆盖在图像传感器的视场中的对象的媒体捕获预览上的标线片元件，其中媒体捕获预览随着图像传感器的视场中的对象改变而改变。该方法还包括：在媒体捕获预览中检测平面；以及响应于检测到该平面，在显示器上以第二外观状态显示覆盖在媒体捕获预览上的标线片元件，其中当以第二外观状态显示时，标线片元件对应于平面的范围的一部分的指示。

根据一些实施方案，在具有非暂态存储器和一个或多个处理器的电子设备处执行一种方法。该方法包括：获得多组图像；针对多组图像中的每一组合成三维点云；使用相应的三维点云构建平面；以及生成一组合并的四叉树，其表征在三维点云上的一组合并的平面。

根据一些实施方案，电子设备包括显示器、一个或多个输入设备、一个或多个处理器、非暂态存储器以及一个或多个程序；一个或多个程序被存储在非暂态存储器中并且被配置为由一个或多个处理器执行，并且一个或多个程序包括用于执行或导致执行本文所述的方法中的任一种方法的操作的指令。根据一些实施方案，一种非暂态计算机可读存储介质具有存储在其中的指令，当这些指令由具有显示器和一个或多个输入设备的电子设备的一个或多个处理器执行时，使得设备执行或导致执行本文所述的方法中的任一种方法的操作。根据一些实施方案，电子设备包括：显示器、一个或多个输入设备；以及用于执行或导致执行本文所述的方法中的任一种方法的操作的装置。根据一些实施方案，在具有显示器和一个或多个输入设备的电子设备中使用的信息处理装置包括用于执行或导致执行本文所述的方法中的任一种方法的操作的装置。

附图说明

为了更好地理解各种所述实施方案，应结合以下附图参考下面的具体实施方式，其中类似的附图标号在所有附图中指示对应的部分。

图1A是示出根据一些实施方案的具有触敏显示器的便携式多功能设备的框图。

图1B是示出根据一些实施方案的用于事件处理的示例性部件的框图。

图2示出了根据一些实施方案的具有触摸屏的便携式多功能设备。

图3是根据一些实施方案的具有显示器和触敏表面的示例性多功能设备的框图。

图4A-4M示出了根据一些实施方案的用于检测虚拟衬底并将对象放置在其上的示例性用户界面。

图5A-5B示出了根据一些实施方案的用于生成一组四叉树的示例性抽象框图。