[发明专利]一种全景视频的存储优化方法、系统、终端及存储介质在审
申请号: | 202210886773.9 | 申请日: | 2022-07-26 |
公开(公告)号: | CN115720263A | 公开(公告)日: | 2023-02-28 |
发明(设计)人: | 陈梓豪;邹龙昊;陈作舟;薛雅利;陈昊;王彬彬;陶小峰 | 申请(专利权)人: | 鹏城实验室 |
主分类号: | H04N13/106 | 分类号: | H04N13/106;H04N13/161;H04N13/194;H04N19/597;H04N19/136;H04N19/423 |
代理公司: | 深圳市君胜知识产权代理事务所(普通合伙) 44268 | 代理人: | 陈专;温宏梅 |
地址: | 518000 广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 全景 视频 存储 优化 方法 系统 终端 介质 | ||
1.一种全景视频的存储优化方法,其特征在于,所述全景视频的存储优化方法包括:
获取全景视频中第一全景图像,识别所述第一全景图像中的对象,计算所述对象的运动范围,并将所述全景视频分割成全景视频块;
基于所述全景视频块获取第二全景图像,对所述第二全景图像进行分割得到语义分割结果,并对所述语义分割结果进行投影得到投影平面;
对所述投影平面进行强化学习处理,并将所述全景视频块投影成平面格式后进行压缩储存。
2.根据权利要求1所述的全景视频的存储优化方法,其特征在于,所述获取全景视频中第一全景图像,识别所述第一全景图像中的对象,计算所述对象的运动范围,并将所述全景视频分割成全景视频块,具体包括:
对全景视频进行均匀采样以获取数帧的全景图像,对所述全景图像采用对象识别算法识别出每帧全景图像中的对象,并标记连续帧内的相同对象;
当对象的中心点作为所述对象的重心时,设定一个时间长度,计算得出每个对象的第一帧到所述时间长度后的一帧之间的重心移动距离;
计算出所述重心移动距离的平均值,将所述平均值作为所述时间长度内所有对象的平均运动范围,并设定所述平均范围的阈值;
判断所述平均运动范围与所述阈值的大小,若所述平均运动范围等于所述阈值时,则使用所述时间长度在时间轴上分割全景视频为多段全景视频块。
3.根据权利要求2所述的全景视频的存储优化方法,其特征在于,所述阈值的大小根据投影格式进行设定。
4.根据权利要求2所述的全景视频的存储优化方法,其特征在于,所述判断所述平均运动范围与所述阈值的大小,还包括:
若所述平均运动范围大于所述阈值时,则缩短所述时间长度,并重新计算缩短后的时间长度内所有对象的平均运动范围;
若所述平均运动范围小于所述阈值时,则增加所述时间长度,并重新计算增加后的时间长度内所有对象的平均运动范围。
5.根据权利要求1所述的全景视频的存储优化方法,其特征在于,所述基于所述全景视频块获取第二全景图像,对所述第二全景图像进行分割得到语义分割结果,并对所述语义分割结果进行投影得到投影平面,具体包括:
从所述全景视频块中提取出数帧的第二全景图像,将所述第二全景图像输入到语义分割算法中进行分割得到语义分割结果;
基于所述语义分割结果的投影格式,选择所述投影格式对应的投影坐标系,使用所述投影坐标系对所述语义分割结果进行投影并得到多个投影平面。
6.根据权利要求5所述的全景视频的存储优化方法,其特征在于,所述投影格式包括等距形投影格式和立方体投影格式。
7.根据权利要求5所述的全景视频的存储优化方法,其特征在于,所述对所述投影平面进行强化学习处理,并将所述全景视频块投影成平面格式后进行压缩储存,具体包括:
将所述投影平面按照时间轴顺序输入至强化学习方法中处理,处理完成后输出多自由度旋转角度;
基于所述多自由度旋转角度完成对所述投影坐标系的旋转,并使用旋转后的投影坐标系对所述全景视频块进行投影,得到平面格式的第一全景视频块;
对所述第一全景视频块进行压缩储存,并将所述第一全景视频块的多自由旋转角度存储在记录文件中。
8.根据权利要求7所述的全景视频的存储优化方法,其特征在于,所述基于所述多自由度旋转角度完成对所述投影坐标系的旋转,还包括:
若存在多个合适的多自由旋转角度,则对所述投影坐标系进行多次迭代旋转,并将每次旋转后的投影坐标系对所述全景视频块进行投影,得到多个平面格式的第二全景视频块;
将所有第二全景视频块均进行压缩,并记录每个第二全景视频块的压缩率;
选取压缩率最高的第二全景视频块进行存储,并将所述第二全景视频块的多自由度旋转角度记录在文件中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于鹏城实验室,未经鹏城实验室许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210886773.9/1.html,转载请声明来源钻瓜专利网。