[发明专利]用于合成图像的方法和设备

说明书

用于合成和/或发送第一图像到第一显示设备的方法和设备，该方法包括接收表示场景的第二图像，该场景包括显示第三图像的第二显示设备；接收第三图像；获得表示第二显示设备相对于场景的姿势的第一信息；根据第一信息使第三图像变形；通过使用获得的第一信息组合第二图像和变形的第三图像来生成第一图像；以及发送表示第一图像的数据。

技术领域

本公开涉及例如在移动设备，诸如，例如头戴式显示器(HMD)，平板电脑或智能电话，上消费的沉浸式视频内容的背景下的图像处理的领域。

背景技术

诸如头戴式显示器(HMD)或平板电脑之类的显示设备允许用户浏览沉浸式视频内容。例如，头戴式显示器(HMD)是戴在头上或作为头盔的一部分的显示设备，其在一只眼睛前面(单眼HMD)或在每只眼睛前面(双目HMD)具有小显示光学器件。它们特别允许用户观看3D虚拟场景并通过旋转他/她的头来浏览它。根据用户头部姿势更新场景的视图。这样的设备最初在几十年前提出，但最近，由于特别是OLED和LCD屏幕的进步，它们的价格以及它们的性能已经发生了巨大变化，甚至一些HMD现在是消费产品。这样的HMD的价格是合理的并且可以提供110°视场，同时实现关于头部姿势估计的非常低的延时(例如，20ms)。

各种视差可能影响整体用户体验。例如，如果视觉参数没有被对齐，则用户可能感觉恶心。因此，创建沉浸体验的设备和能力可以改进或另外生成关于用户与现实世界交互的能力的问题。

发明内容

说明书中对“一个实施例”，“实施例”，“示例实施例”，“具体实施例”的引用指示描述的实施例可以包括具体特征、结构或特性，但是每个实施例可以不必包括具体特征、结构或特性。而且，这样的短语不必指代同一实施例。此外，当结合实施例描述具体特征、结构或特性时，提出无论是否明确描述，结合其他实施例影响这样的特征、结构或特性在本领域技术人员的知识中。

本公开涉及将第一图像发送到第一显示设备的方法，该方法包括：

-接收表示场景的第二图像，场景包括显示第三图像的第二显示设备；

-接收第三图像；

-获得表示第二显示设备相对于场景的姿势的第一信息；

-根据第一信息使第三图像变形；

-通过使用所获得的第一信息组合第二图像和变形的第三图像，生成第一图像；

-发送表示第一图像的数据。

根据特性，变形的第三图像被重叠在第二图像的包括第二显示设备的屏幕的表示的部分上。

根据特定特性，从与第一显示设备相关联的摄像头接收第二图像。

根据另一特性，从将第三图像发送到第二显示设备的源设备接收第三图像，用于在第二显示设备上显示。

根据具体特性，第一显示设备是头戴式显示器，并且第二显示设备是包括显示屏的移动设备。

根据另一特性，通过比较接收到的第三图像与包括显示第三图像的第二显示设备的第二图像的内容，获得第一信息。

根据特定特性，获得包括从第二显示设备接收第一信息。

根据另一特性，获得包括：

-获取第二显示设备的第四图像，至少一个基准标记显示在第二显示设备上；

-跟踪第四图像上的至少一个基准标记；

-基于被跟踪的至少一个基准标记确定第一信息。

根据具体特性，第一显示设备包括适配于获取第四图像的摄像头。