[发明专利]一种全景视频的存储优化方法、系统、终端及存储介质

说明书

本发明公开了一种全景视频的存储优化方法、系统、终端及存储介质，所述方法包括：获取全景视频中第一全景图像，识别所述第一全景图像中的对象，计算所述对象的运动范围，并将所述全景视频分割成全景视频块；基于所述全景视频块获取第二全景图像，对所述第二全景图像进行分割得到语义分割结果，并对所述语义分割结果进行投影得到投影平面；对所述投影平面进行强化学习处理，并将所述全景视频块投影成平面格式后进行压缩储存。本发明通过将全景视频在时间轴上分割为多段全景视频块，依据每段全景视频块的内容，对投影坐标系进行多自由度空间旋转后，对全景视频进行投影为平面格式并压缩视频，使得压缩后的全景视频所需的存储空间减少。

技术领域

本发明涉及全景视频点播或直播领域，尤其涉及一种全景视频的存储优化方法、系统、终端及存储介质。

背景技术

全景视频是一种用3D摄像机进行全方位360度进行拍摄的视频，用户在观看视频的时候，可以随意调节视频上下左右进行观看。全景视频可提供全方位视野，允许用户自由选择任意方向进行观看，提供了身临其境的观影感受。

现有技术中，在存储全景视频时，由于高质量的全景视频码率很大，当前带宽不足以支持高质量全景视频实时传输，通常将全景视频在时间轴上分割为多段相同时间长度的全景视频块，然后使用多种投影坐标系，将全景视频块内每帧全景图像投影为多面体格式，然后将多面体的各个投影面拼接为单张平面格式的图像，再使用传统的平面视频压缩技术对连续帧进行压缩，例如H256视频编码标准；但是实际投影过程中，单帧全景图像内的车等前景对象会坐落在不同的投影面中，第二行中间两个投影面将汽车割裂；前景对象的空间不连续性不利于平面视频压缩技术的压缩过程，导致其压缩率降低，占用更多的存储空间。

此外，每段全景视频块内可能存在多个前景对象同时运动，全景视频块时间长度越长，前景对象的运动范围越大，更可能让大量前景对象跨越更多投影面，相反，如果时间长度越短，时间连续性也会受到干扰，在这些情况下同样不利于平面视频压缩技术的压缩过程。

因此，现有技术还有待于改进和发展。

发明内容

本发明的主要目的在于提供一种全景视频的存储优化方法、系统、终端及存储介质，旨在解决现有技术中前景对象的空间不连续性与全景视频块时间长度过短时均不利于平面视频压缩技术的压缩过程，导致压缩率降低，占用更多存储空间的问题。

为实现上述目的，本发明提供一种全景视频的存储优化方法，所述全景视频的存储优化方法包括如下步骤：

获取全景视频中第一全景图像，识别所述第一全景图像中的对象，计算所述对象的运动范围，并将所述全景视频分割成全景视频块；

基于所述全景视频块获取第二全景图像，对所述第二全景图像进行分割得到语义分割结果，并对所述语义分割结果进行投影得到投影平面；

对所述投影平面进行强化学习处理，并将所述全景视频块投影成平面格式后进行压缩储存。

可选地，所述的全景视频的存储优化方法，其中，所述获取全景视频中第一全景图像，识别所述第一全景图像中的对象，计算所述对象的运动范围，并将所述全景视频分割成全景视频块，具体包括：

对全景视频进行均匀采样以获取数帧的全景图像，对所述全景图像采用对象识别算法识别出每帧全景图像中的对象，并标记连续帧内的相同对象；

当对象的中心点作为所述对象的重心时，设定一个时间长度，计算得出每个对象的第一帧到所述时间长度后的一帧之间的重心移动距离；

计算出所述重心移动距离的平均值，将所述平均值作为所述时间长度内所有对象的平均运动范围，并设定所述平均范围的阈值；

判断所述平均运动范围与所述阈值的大小，若所述平均运动范围等于所述阈值时，则使用所述时间长度在时间轴上分割全景视频为多段全景视频块。