[发明专利]一种VR全景适配的超分辨处理系统

说明书

本发明公开了一种VR全景适配的超分辨处理系统，属于影像处理技术领域，该系统包括全景视频采样模块、卷织网络神经模块、编码模块、视频转换模块和VR显示模块，通过卷织网络神经模块的特征提取、特征降维、非线性映射、向高维空间映射，超分辨率特征、重建能够得到超分辨率影像视频数据，使得影像数据更清晰，通过编码模块能够使视频数据便于储存和传输，去除空间时间维度的冗余，通过视频转换模块穿换成RGB视频信号，再通过VR显示模块分解成左眼显示和右眼显示的视频数据，能够达到最好的播放效果。

技术领域

本发明属于影像处理技术领域，具体地说，涉及一种VR全景适配的超分辨处理系统。

背景技术

VR，即虚拟现实，显示技术高速发展，出现各种各样的显示设备；用户对显示设备的选择也越来越高，因此更轻，更薄的VR眼镜成为用户追求的目标；同时更薄更轻的VR眼镜也对技术提出了新的挑战。

目前人们对于VR视频质量，尤其是视频清晰度的需求与日俱增，现在的VR全景视频数据不够清晰，无法达到超分辨率的效果。

发明内容

针对现有的VR全景视频数据不够清晰，无法达到超分辨率的效果的问题，本发明提供一种VR全景适配的超分辨处理系统，该系统包括全景视频采样模块、卷织网络神经模块、编码模块、视频转换模块和VR显示模块；该模块配合使用可以有效解决现有的VR全景视频数据不够清晰，无法达到超分辨率的效果的问题。

为解决上述问题，本发明采用如下的技术方案。

一种VR全景适配的超分辨处理系统，包括全景视频采样模块、卷织网络神经模块、编码模块、视频转换模块和VR显示模块；所述的全景视频采样模块包括影像检测装置、获取影像、处理影像，影像检测装置能够将需要拍摄的场景进行全景拍摄，并呈现为一种未展开的矩形影像，该矩形影像为密度均匀的影像，然后将上述未展开矩形影像通过处理，还原成360度环形的全景影像，其全景影像与真实世界比例相同的环状影像，然后将拍摄并处理的影像传输至卷织网络神经模块进行进一步处理。

优选地，所述的卷织网络神经模块包括特征提取、特征降维、非线性映射、向高维空间映射，超分辨率特征、重建和超分辨率影像，将输送过来的影像进行特征提取，特征提取的结果是把图像上的点分为不同的子集，这些子集往往属于孤立的点、连续的曲线或者连续的区域，特征的好坏对泛化性能有至关重要的影响，再将图像进行特征降维，降维处理的基本思路力争在不改变高维数据结构的前提下，将高维空间的数据投影到低维空间，一般为二维或二维空间中，然后进行分析。主成分分析、偏最小二乘、非线性映照和近年来得以迅速发展的投影寻踪技术就是这样的降维处理方法，以达到单幅图像转化高维空间中数据集合，再进行非线性映射，非线性映射分析是一种“几何图像降维”的数学方法.在近似保持样品点间关系的基础上，通过非线性变换后将高维空间中几何图像转换到二维平面上，以直观考察各样品点间的关系.把多个影响断层封闭性的因素看成是多维坐标，则每条断层即是这多维空间中的一个点.封闭能力近似的断层，所在坐标中空间位置相近，经非线性映射降维之后，封闭能力相似的断层在二维平面中具相近的位置关系，根据上述步骤从而获得超分辨率特征，并根据超分辨率特征对影像进行重建，从而得到超分辨率的影像，然后将得到的超分辨率影像输送至编码模块。

优选地，所述的编码模块：视频是连续的图像序列，由连续的帧构成，一帧即为一幅图像，由于人眼的视觉暂留效应，当帧序列以一定的速率播放时，我们看到的就是动作连续的视频，由于连续的帧之间相似性极高，为便于储存传输，我们需要对原始的视频进行编码压缩，以去除空间、时间维度的冗余。经过编码后输送至视频转换模块。