[发明专利]AR内容的投屏方法、系统、电子设备和存储介质

说明书

本申请涉及一种AR内容的投屏方法，其中，该方法包括：第一终端通过相机模组数据流生成实景图，并通过渲染引擎将实景图与虚拟内容叠加，生成增强现实画面，其中，若第一终端通过跟踪相机获取位姿数据，在生成增强现实画面的过程中，基于预设流程将实景图和虚拟内容进行时空同步；第一终端，通过WebRTC通讯技术与第二终端建立无线串流通道，通过无线串流通道直接发送增强现实画面至第二终端，并指示第二终端同步展示增强现实画面通过本申请，解决了相关技术中AR投屏方法时空间不同步的问题，在无需额外硬件装置的情况下，实现了AR内容的投屏播放，并且能够保障AR投屏画面质量。

技术领域

本申请涉及增强现实领域，特别是涉及一种AR内容的投屏方法、系统、电子设备和存储介质。

背景技术

随着AR(Argument Reality、增强现实)技术的不断发展，用户普遍希望能够录制和分享自身的AR内容，如何将AR内容录制以及投屏至其他终端，是本领域的迫切需求。

在相关技术中，应用较多的是基于VR(Virtual Reality，虚拟现实)的投屏技术，由于VR内容不涉及现实内容，因此也不存在虚实叠加导致时空错乱的问题，相较于AR投屏技术实现起来更为容易。

相关技术中的AR投屏内容，通过在AR终端设备一侧安装微摄像头，通过该微摄像头同时拍摄显示界面中的虚像和实像，并采用有线或无线的方式连接到外部显示设备并发送该拍摄图像，从而实现投屏播放。

但是，上述方案需要增加特定的设备(微摄像机)，该方法不仅需要额外的硬件成本，同时，由于微摄像机透过镜片拍摄虚像时虚像成像效果较差，并且微摄像机的安装角度很难保证虚实内容的空间一致性，导致投屏侧用户的体验不佳。

发明内容

本申请实施例提供了一种AR内容的投屏方法方法、系统、计算机设备和存储介质，以至少解决相关技术中AR内容投屏方法时空锚定效果较差的问题。

第一方面，本申请实施例提供了一种AR内容的投屏方法，所述方法包括：

第一终端，通过相机模组数据流生成实景图，并通过渲染引擎将所述实景图与虚拟内容叠加，生成增强现实画面，

其中，若所述第一终端通过跟踪相机获取位姿数据，在生成增强现实画面的过程中，基于预设流程将所述实景图和所述虚拟内容进行时空同步；

所述第一终端，通过WebRTC通讯技术与第二终端建立无线串流通道，通过所述无线串流通道直接发送增强现实画面至所述第二终端，并指示所述第二终端同步展示所述增强现实画面。

在其中一些实施例中，所述第一终端通过RGB相机同时获取位姿数据以及拍摄实景图的情况下，直接通过渲染引擎将所述实景图与虚拟内容叠加，生成增强现实画面。

在其中一些实施例中，基于预设流程将所述实景图和所述虚拟内容进行时空同步，包括：

在通过渲染引擎将所述实景图与虚拟内容叠加的过程中，对所述实景图和所述虚拟内容进行时间同步，

以及，根据所述跟踪相机采集的位姿数据，将所述实景图和所述虚拟内容进行空间同步。

在其中一些实施例中，对所述实景图和所述虚拟内容进行时间同步，包括：

通过硬件装置执行同步曝光，对所述实景图和所述虚拟内容进行时间同步，或者，

获取所述实景图和所述虚拟内容的时间标记信息，基于所述时间标记信息，通过数据流软同步，实现所述实景图和所述虚拟内容的时间同步。

在其中一些实施例中，根据所述跟踪相机采集的位姿数据，将所述实景图和所述虚拟内容进行空间同步包括：

获取所述跟踪相机和所述RGB相机之间的外参；