[发明专利]用于提供混合现实图像的方法、设备和计算机可读介质

说明书

描述了用于捕获一个或多个现实世界图像以用于与一个或多个计算机生成的图像(例如全息图)一起显示的示例。可以接收用于在一个或多个现实世界图像上覆盖的一个或多个计算机生成的图像，并且可以确定用于将计算机生成的图像中的至少一个覆盖在一个或多个现实世界图像上的深度。可以基于该深度聚焦相机的镜头，并且可以经由具有基于深度聚焦的镜头的相机来捕获一个或多个现实世界图像。可以提供一个或多个现实世界图像作为一个或多个混合现实图像，其中一个或多个计算机生成的图像覆盖在一个或多个现实世界图像上，使得图像被聚焦在一个或多个计算机生成的图像附近的对象上。

技术领域

本公开的实施例涉及用于提供混合现实图像的方法、设备和计算机可读介质。

背景技术

混合现实(MR)涉及描述现实世界和计算机生成数据的组合的计算机研究领域。传统上，MR采用现实世界视频图像的使用，其被数字处理并与计算机生成的图形的添加混合，其可以包括二维或三维图像，例如全息图。一些MR系统利用相机来获得一个或多个现实图像(例如视频帧)，并且在一个或多个图像上覆盖一个或多个全息图以在设备显示器上显示，其中显示设备可以是MR设备上的显示器、在另一设备上的显示器、远程显示器等。在一个特定应用中，显示MR覆盖图像的设备可以是基于镜头的设备，其包括位于镜头内并且在穿戴着该设备的用户视野中的显示器。该设备还可以包括捕获一个或多个现实图像的相机，其中这些一个或多个图像是位于镜头前方的场景的一部分。类似地，支持相机的无线电话或具有相机的其他设备可用于捕获一个或多个现实图像，并且生成一个或多个图像，其中一个或多个全息图覆盖在一个或多个图像上。例如支持相机的无线电话可以在显示器的相对侧上具有后置相机，使得相机可以捕获显示器前面的一个或多个现实图像。

发明内容

以下呈现一个或多个方面的简要概述，以便提供对这些方面的基本理解。该发明内容不是对所有预期方面的广泛概述，并且既不旨在标识所有方面的关键或重要元素，也不旨在描绘任意或所有方面的范围。其唯一目的是以简化形式呈现一个或多个方面的一些概念，作为稍后呈现的更详细描述的序言。

在示例中，提供了一种计算设备，其包括：相机，包括：镜头，该镜头被配置为捕获并提供一个或多个现实世界图像；以及至少一个处理器，被配置为将一个或多个计算机生成的图像覆盖在所述一个或多个现实世界图像上。所述至少一个处理器被配置为使得所述相机至少部分地基于深度来聚焦所述镜头以用于捕获所述一个或多个现实世界图像，在所述深度处所述至少一个处理器覆盖所述一个或多个计算机生成的图像中的至少一个计算机生成的图像。

在另一示例中，提供了一种用于捕获一个或多个现实世界图像以用于与一个或多个计算机生成的图像一起提供的方法。该方法包括接收用于覆盖一个或多个现实世界图像的一个或多个计算机生成的图像，确定用于将一个或多个计算机生成的图像中的至少一个计算机生成的图像覆盖在一个或多个现实世界图像上的深度，基于深度来聚焦相机的镜头，经由具有基于深度聚焦的镜头的相机来捕获一个或多个现实世界图像，并且提供一个或多个现实世界图像作为一个或多个混合现实图像，其中一个或多个计算机生成的图像覆盖在一个或多个现实世界图像上。

在另一示例中，提供了一种非暂态计算机可读介质，其包括用于捕获一个或多个现实世界图像以用于与一个或多个计算机生成图像一起提供的代码。该代码包括用于接收一个或多个计算机生成的图像以用于覆盖一个或多个现实世界图像的代码，用于确定用于将一个或多个计算机生成的图像中的至少一个计算机生成的图像覆盖一个或多个现实世界图像上的的深度的代码，用于基于深度来聚焦相机镜头的代码，用于经由具有基于深度聚焦的镜头的相机来捕获一个或多个现实世界图像的代码，以及用于提供一个或多个现实世界图像作为一个或多个混合现实图像的代码，其中一个或多个计算机生成的图像覆盖在一个或多个现实世界图像上。

为了实现前述和相关目的，一个或多个方面包括在下文中充分描述并在权利要求中特别指出的特征。以下描述和附图详细阐述了一个或多个方面的某些说明性特征。然而，这些特征仅指示可以采用各个方面的原理的各种方式中的一些，并且该描述旨在包括所有这些方面及其等同物。

附图说明