[发明专利]一种基于视角的VR流媒体播放方法及装置

说明书

本申请公开了一种基于视角的VR流媒体播放方法和装置，其中，所述方法包括：基于视角切片的VR全景视频分层编码技术对若干个视频画面分别进行编码处理；基于HLS协议对视角切片的VR全景视频流媒体协议进行扩展，并根据用户视区传输相应的目标视频画面；将各个视角切片对应的视频流进行拼接还原为全幅的视频画面，最后渲染到VR显示设备。采用本申请所述的基于视角的VR流媒体播放方法，能够大大降低VR全景视频传输带宽，能在现行网络中快速投放VR全景视频，同时降低了用户端的解码规模要求，仅支持4K解码的VR设备能具备8K的VR全景视频的解码能力，在当前主流VR设备中即可获得更高质量的VR全景视频画面。

技术领域

本发明实施例涉及VR流媒体数据处理领域，具体涉及一种基于视角的VR流媒体播放方法及装置，另外还涉及一种电子设备及计算机可读存储介质。

背景技术

目前，VR全景视频通常采用传统视频编码技术对360度展开的全幅画面进行统一编码和传输，最后在用户端解码并渲染出整个画面。但是，由于VR全景视频为360度全向视频内容，为保证用户观影的舒适度，视频一般都采用4K或8K的分辨率，并且编码质量也要求相对较高，这在实际应用中会带来很多问题。比如：传输视频码率非常高，一般画面质量的视频码率超过30Mbps，高质量的视频码率将超过50Mbps，这样高的码率在当前的运营网络里很难传输，同时有如此高的带宽接入用户也很少，这大大限制了现阶段VR全景视频的推广与发展；VR设备一般使用家庭无线WIFI联网，高码率也对无线WIFI的传输效率提出更高的要求；如果VR全景视频采用8K编码时，当前的VR设备基本都不支持，当前主流VR设备仅支持最高4K的解码能力，这使得更高质量的VR全景视频无法投放到用户端。

发明内容

为此，本发明实施例提供一种基于视角的VR流媒体播放方法，以解决现有技术中存在的VR全景视频传输带宽要求较高，VR全景视频播放不够流畅和清晰的问题。

为了实现上述目的，本发明实施例提供如下技术方案：

第一方面，本发明实施例提供一种基于视角的VR流媒体播放方法，包括：基于视角切片的VR全景视频分层编码技术对若干个视频画面分别进行编码处理；基于HLS协议对视角切片的VR全景视频流媒体协议进行扩展，并根据用户视区传输相应的目标视频画面；将各个视角切片对应的视频流进行拼接还原为全幅的视频画面，最后渲染到VR显示设备。

进一步的，所述基于视角切片的VR全景视频分层编码技术对若干个视频画面分别进行编码处理，包括：将VR全景视频画面切分不同视角的若干个视频画面，采用分层编码技术同时为VR全景视频画面转码出两层视频，所述两层视频中第一层视频为低分辨率的基本层视频，第二层视频为高分辨率的增强层视频，所述增强层视频为用户视区部分的清晰内容，所述基本层视频为用户视区之外部分的填充内容；将所述若干个视频画面拼接为一个完整的全向视频。

进一步的，所述基于HLS协议对视角切片的VR全景视频流媒体协议进行扩展，并根据用户视区传输相应的目标视频画面，包括：采用两层M3U8索引文件，第一层M3U8对视区参数进行扩展，第二层M3U8定义为与所述HLS协议相同；在用户观看时，通过所述第一层M3U8获取不同视区的二级M3U8文件列表，根据用户当前视区获取对应的二级M3U8文件，展示相应的目标视频画面。

进一步的，所述二级M3U8文件包括：视区内高分辨率的增强层视频内容和视区外低分辨率的基本层视频内容。

进一步的，所述将各个视角切片对应的视频流进行拼接还原为全幅的视频画面，最后渲染到VR显示设备，包括：在用户端创建多个视频的解码器对视角切片进行解码，拼接各个视角切片视频，还原为全幅的视频画面，最后渲染到VR显示设备对应的球面上。