[发明专利]一种编解码全景视频的方法和系统

说明书

一种编解码全景视频的方法和系统，方法包括：全景相机在拍摄得到全景视频后，将全景视频发送给影像数据缓存单元；所述影像数据缓存单元通过编码器依据视角划分规则将全景视频划分成多个视角视频序列；对每个视角视频序列进行编码，得到多组编码数据；用户设备通过解码器对该编码数据进行解码，对解码得到的视角视频序列进行播放；系统包括全景相机、通信单元以及用户设备；本发明不仅能够准确判定用户运动趋势，而且根据预处理单元确保实时对视角前有效视角范围FOV对应的全景视频进行解码，降低了解码开销。

技术领域

本发明涉及全景视频编解码技术领域，更具体地说，涉及一种编解码全景视频的方法和系统。

背景技术

全景视频是虚拟现实影像显示的主要内容载体，全景视频是由一系列全景影像帧组成的视频，直观的影像是全景动态展现的。全景影像帧是记录预定视角的景物所形成的图像帧，例如，预定视角为水平360°、垂直180°，或预定视角为水平360°、垂直270°等等。编码器在通过全景摄像机得到全景视频后，需要对全景视频进行编码，并将编码后的全景视频发送给解码器进行解码，通过解码，用户可以观看到全景视频。

现有技术中，编码器获取的是全景视频中的所有全景影像帧，并对每个全景影像帧进行编码，利用的是高度压缩数字视频编码器标准H.264/AVC定义的编码规则进行编码，或者按照高效视频编码标准H.265定义的编码规则进行编码；对全景视频的每个全景影像帧编码后，我们会得到以块为单元的矩形区域集合，即为该影像帧的编码数据；然后将每个全景影像帧发送给解码器，用户设备中的解码器对发送过来的编码后的全景影像帧进行解码，将全部全景影像帧解码后形成一完整视频供用户观看。

但是在实际中用户的视角通常在150°左右，因此全景影像帧中只有150°的视角的编码数据是有效的，其余的编码数据是无效的，而接收和编解码这些数据会造成不必要的解码开销。

发明内容

本发明的目的在于提供一种编解码全景视频的方法和系统，旨在解决现有虚拟现实影像中的全景影像帧的多余的解码开销问题，以及如何确保实时性对视角范围FOV对应的全景视频的影像帧编解码问题，以及在无规律头部运动趋势判断难度大的问题。

本发明解决其技术问题，采用的技术手段是：提供一种编解码全景视频的方法，使用包括全景相机、通信单元、用户设备、摄像头组、影像数据缓存单元、编码器、定位装置、预处理单元以及解码器，包括以下步骤：

S1、将全景相机拍摄得到全景视频发送给影像数据缓存单元；

S2、所述影像数据缓存单元通过编码器依据视角划分规则将全景视频的每个全景影像帧按照水平视角划分成A个区域，A为整数，根据头部运动趋势将全景视频划分成多个有效的视角视频序列；

S3、编码器对由特定视角的全景影像帧组成的有效视角视频序列进行编码，得到多组编码数据；

S4、根据用户观看视角将对应的编码数据通过通信单元发送给用户设备，所述用户设备通过解码器对该编码数据进行解码，对解码得到的视角视频序列进行播放。

优选地，步骤S3包括以下子步骤：

S31、全景相机通过不同方位的摄像头拍摄视频；

S32、将摄像头组在同一时刻拍摄到的各个图像帧进行拼接，拼接成全景影像帧；

S33、根据头部运动趋势数据和视角划分规则，特定视角的全景影像帧组成有效的全景视频，提供给编码器。

优选地，步骤S4包括以下子步骤：

S41、利用用户设备中的定位装置采集用户的头部运动趋势；

S42、编码器根据头部运动趋势数据来确定上述A个区域中预定区域对应的有效的视角视频序列；