[发明专利]多视角直播视频的同步切换方法、装置、设备和介质

说明书

本申请提供的一种多视角直播视频的同步切换方法、装置、设备和介质，通过采集端、服务器、客户端的协作，用户通过滑动手机屏幕实时交互方式，围绕直播画面自由选择视角，选择最合适自己的观看角度，随心所欲畅享全场景、沉浸式体验。该方法通过精确的同步控制、相机标定、图像校正、压缩编码等技术实现了多相机间进行流畅自如的实时切换，且切换后的视角画面为高清，实现了用户从“被动接受内容的观众”到“掌握控制权的导演”转变，满足了用户观看场景移动化、文化表达多元化的需求。

技术领域

本发明涉及多视角视频处理技术领域，特别是涉及一种多视角直播视频的同步切换方法、装置、设备和介质。

背景技术

传统视频直播基本都是导播推给你画面进行光看，用户不能随意选择自己想要观看的视角画面，缺乏新鲜感和娱乐性。乘着5G春风，自由视点技术突破了传统被动观看的体验，让不可思议的交互直播成为现实，用户通过滑动手机屏幕实时交互方式，围绕直播画面自由旋转，选择最合适自己的观看角度，随心所欲畅享全场景、沉浸式体验。

自由视点技术需要精确到毫秒级同步捕捉多视角画面，从而可以使用户一边播放一边滑动手机屏幕，而直播画面是连续运动状态，不需要画面停滞。具体来说，通过精确的同步控制，以每秒30FPS实现不间断采集，360°多相机间进行流畅自如的实时切换。例如，当用户滑动手机屏幕切换视角时，其实是快速切换直播现场不同机位的360°高精度相机动态视角。

实时交互直播的发展将给体育赛事、大型影视表演、网综节目、广告创意等领域带来前所未有的全方位立体观感，实现了用户从“被动接受内容的观众”到“掌握控制权的导演”转变，满足了用户观看场景移动化、文化表达多元化的需求。在实时互动和成像速度上具有领先优势的自由视点技术，或将成为国内直播发展形态上的转折点，它重新定义了视频观看体验，正式开启了5G交互式直播时代，加速推动中国文娱行业走向世界。

但是，目前现有的交互式视频是将多视角画面按相同分辨率拼接成超高清画面，这导致观看视角画面的分辨率普遍较低，而且能选择的视角数量有限，导致用户体验不好。因此，提高观看视角画面分辨率及可选视角数量对于推多视角交互直播发展具有重要作用。

发明内容

鉴于以上所述现有直播技术的缺点，本申请的目的在于提供一种多视角直播视频的同步切换方法、装置、设备和介质，以解决传统直播中观众只能被动观看及交互视频观看视角画面分辨率低和视角数量较少的问题。

为实现上述目的及其他相关目的，本申请提供一种多视角直播视频的同步切换方法，应用于采集端，所述方法包括：获取环形相机阵列同步采集的多个不同视角的视频画面；其中，各所述视频画面包含基于采集时间的采集时间戳；对各个不同视角的视频画面进行图像校正并分别生成高分辨率视频画面；对各所述高分辨率视频画面分别进行编码压缩、及封装，并传输至服务器。

于本申请的一实施例中，所述环形相机阵列中各相机设有硬件触发器，用于触发各相机同步采集视频画面；其中，所述硬件触发器采用同一时钟。

于本申请的一实施例中，对各个不同视角的视频画面进行图像校正并分别生成高分辨率视频画面，包括：预先对环形相机阵列中各相机进行标定，以获取各相机对应的至少包含内参、外参、及畸变参数的相机参数；依据所述相机参数对各相机采集的所述视频画面进行图像秀修正，以得到高分辨率视频画面。

为实现上述目的及其他相关目的，本申请提供一种多视角直播视频的同步切换方法，应用于服务器，所述方法包括：同步接收多个封装的对应为不同视角的高分辨率视频画面；将各所述高分辨率视频画面解码为高清视频画面，同时再将各所述高清视频画面缩放出一低清视频画面；对各所述高清视频画面与各所述低清视频画面进行拼接，并形成对应视角数量的组合视频画面；其中，各所述组合视频画面包含一个不同视角的高清视频画面、及全部视角的低清视频画面；对各所述组合视频画面按时间同步进行切片，并将各所述组合视频画面编码以供客户端下载。