[发明专利]数据处理方法、系统、相关设备和存储介质

说明书

数据处理方法、系统及相关设备和存储介质，其中一种数据处理方法包括：获取多角度自由视角视频的视频帧中的目标对象；获取基于所述目标对象的增强现实特效输入数据所生成的虚拟信息图像；将所述虚拟信息图像与对应的视频帧进行合成处理并展示。本说明书实施例方案能够兼顾用户视频观看过程中对丰富视觉体验和低时延的需求。

技术领域

本说明书实施例涉及数据处理技术领域，尤其涉及一种数据处理方法、系统及相关设备和存储介质。

背景技术

随着互联技术的不断发展，越来越多的视频平台不断通过提供更高清晰度或者观看流畅度更高的视频，来提高用户的观看体验。然而，针对现场体验感比较强的视频，例如一场体育比赛的视频，用户在观看过程中往往只能通过一个视点位置观看比赛，无法自己自由切换视点位置，来观看不同视角位置处的比赛画面或比赛过程，也就无法体验在现场一边移动视点一边看比赛的感觉。

6自由度(6Degree of Freedom，6DoF)技术就是为了提供高自由度观看体验的一种技术，用户可以在观看中通过交互手段，来调整视频观看的视角，从用户想观看的自由视点角度进行观看，从而大幅度的提升观看体验。

为进一步增强6DoF视频的观看体验，目前存在基于多角度自由视角技术的增强现实(Augmented Reality，AR)特效植入方案，然而现有将AR特效植入多角度自由视角视频的方案难以实现低时延播放，因此无法兼顾用户视频观看过程中对丰富视觉体验和低时延的需求。

发明内容

为满足用户视频观看过程中对丰富视觉体验的需求，本说明书实施例提供了一种数据处理方法、系统及相关设备和存储介质。

本说明书实施例提供了一种数据处理方法，包括：

获取多角度自由视角视频的视频帧中的目标对象；

获取基于所述目标对象的增强现实特效输入数据所生成的虚拟信息图像；

将所述虚拟信息图像与对应的视频帧进行合成处理并展示。

可选地，所述多角度自由视角视频基于从多路同步视频流中截取的指定帧时刻的多个同步视频帧所形成的图像组合相应的参数数据、所述图像组合中预设帧图像的像素数据和深度数据，对预设的虚拟视点路径进行帧图像重建得到，其中，所述多个同步视频帧包含不同拍摄视角的帧图像。

可选地，所述获取基于所述目标对象的增强现实特效输入数据所生成的虚拟信息图像，包括：

基于三维标定得到的所述目标对象在所述多角度自由视角视频的视频帧中的位置，得到与所述目标对象位置匹配的虚拟信息图像。

可选地，所述将所述虚拟信息图像与对应的视频帧进行合成处理并展示，包括：按照帧时刻排序以及相应帧时刻的虚拟视点位置，将相应帧时刻的虚拟信息图像与对应帧时刻的视频帧进行合成处理并展示。

可选地，所述将所述虚拟信息图像与对应的视频帧进行合成处理并展示，包括如下至少一种：

将所述虚拟信息图像与对应的视频帧进行融合处理，得到融合视频帧，对所述融合视频帧进行展示；

将所述虚拟信息图像叠加在对应的视频帧之上，得到叠加合成视频帧，对所述叠加合成视频帧进行展示。

可选地，所述对所述融合视频帧进行展示，包括：将所述融合视频帧插入待播放视频流进行播放展示。

可选地，所述获取多角度自由视角视频的视频帧中的目标对象，包括：响应于特效生成交互控制指令，获取所述多角度自由视角视频的视频帧中的目标对象。

可选地，所述获取基于所述目标对象的增强现实特效输入数据所生成的虚拟信息图像，包括：基于所述目标对象的增强现实特效输入数据，按照预设的特效生成方式，生成所述目标对象对应的虚拟信息图像。