[发明专利]一种编解码全景视频的方法和系统

权利要求书

1.一种编解码全景视频的方法，使用包括全景相机(110)、通信单元(120)、用户设备(130)、摄像头组(111)、影像数据缓存单元(112)、编码器(112a)、定位装置(131)、预处理单元(132)以及解码器(133)，其特征在于，包括以下步骤：

S1、将全景相机(110)拍摄得到全景视频发送给影像数据缓存单元(112)；

S2、所述影像数据缓存单元(112)通过编码器(112a)依据视角划分规则将全景视频的每个全景影像帧按照水平视角划分成A个区域，A为整数，根据头部运动趋势将全景视频划分成多个有效的视角视频序列；

S3、编码器(112a)对由特定视角的全景影像帧组成的有效视角视频序列进行编码，得到多组编码数据；

S4、根据用户观看视角将对应的编码数据通过通信单元(120)发送给用户设备(130)，所述用户设备(130)通过解码器(133)对该编码数据进行解码，对解码得到的视角视频序列进行播放。

2.根据权利要求1所述一种编解码全景视频的方法，其特征在于，步骤S3包括以下子步骤：

S31、全景相机(110)通过不同方位的摄像头拍摄视频；

S32、将摄像头组(111)在同一时刻拍摄到的各个图像帧进行拼接，拼接成全景影像帧；

S33、根据头部运动趋势数据和视角划分规则，特定视角的全景影像帧组成有效的全景视频，提供给编码器(112a)。

3.根据权利要求1所述一种编解码全景视频的方法，其特征在于，步骤S4包括以下子步骤：

S41、利用用户设备(130)中的定位装置采集用户的头部运动趋势；

S42、编码器(112a)根据头部运动趋势数据来确定上述A个区域中预定区域对应的有效的视角视频序列；

S43、预处理单元(132)根据定位装置(131)采集到的用户的头部运动趋势数据确定下一全景影像帧显示时隙的大小。

4.根据权利要求5所述一种编解码全景视频的方法，其特征在于，步骤S41包括以下子步骤：

S411、确定一个基准位置点，该点位置与VR环境中用户的视场的特定位置和方向关联；

S412、对用户头部从基准位置的每个方向上的每次运动以及每个旋转动作进行跟踪，以确定如何显示全景影像帧来维持VR环境连续且真实的效果；

S413、用户设备(130)将采集到的运动趋势数据发送到全景相机中。

5.根据权利要求1所述一种编解码全景视频的方法，其特征在于，所述运动趋势数据包括被检测用户的头部转动的角度和幅度数据。

6.根据权利要求1所述一种编解码全景视频的方法，其特征在于，所述时隙为某一视角一全景影像展示时长，由预处理单元采集到的用户的头部的运动趋势数据决定的。

7.根据权利要求1所述一种编解码全景视频的方法，其特征在于，一个全景影像视频中的所有影像帧的视角划分规则相同，A个区域视角视频序列的水平视角的总和为全景影像帧的总水平视角，且一个全景影像帧中的各个区域之间互不重叠。

8.提供一种编解码全景视频的系统，其特征在于，包括全景相机(110)、通信单元(120)以及用户设备(130)；所述全景相机(110)包括用于拍摄各个方位视频的摄像头组成的摄像头组(111)以及用于存储摄像头组拍摄到的全景视频的影像数据缓存单元(112)，所述影像数据缓存单元(112)包括用于对预定视角的全景视频的全景影像帧进行编码的编码器(112a)。

9.根据权利要求10所述一种编解码全景视频的系统，其特征在于，所述用户设备(130)包括用于采集用户头部运动趋势数据的定位装置(131)、用于对下一全景图像帧在用户设备中展示时隙大小进行预先判定的预处理单元(132)以及用于对编码后的全景影像帧进行解码的解码器(133)。

10.根据权利要求10所述一种编解码全景视频的系统，其特征在于，所述全景相机通过不同方位的摄像头拍摄视频，并将拍摄到的全景视频发送给所述影像数据缓存单元(112)，所述影像数据缓存单元(112)中的编码器(112a)根据视角划分规则将全景视频划分成多个视角视频序列，所述编码器(112a)对每个视角视频序列进行编码，得到多组编码数据；利用所述定位装置(131)采集到的用户头部的运动趋势数据将对应的全景编码数据通过所述通信单元(120)发送到所述用户设备(130)中；所述用户设备(130)中预处理单元(132)根据所述定位装置(131)采集到的用户头部的运动趋势数据来判定下一局部范围的全景影像帧展示时隙，并将控制指令发送给所述编码器(112a)和解码器(133)，所述编码器(112a)和解码器(133)根据所述运动趋势数据和所述控制指令对特定视角的全景影像帧进行编解码。