[发明专利]一种维持视差的双目视频稳像方法

权利要求书

1.一种维持视差的双目视频稳像方法，其特征在于：将双目视频分解为左视角视频和右视角视频；对左视角视频进行防抖处理并输出相应的左视角平稳变换矩阵，对右视角视频进行防抖处理并输出相应的右视角平稳变换矩阵；左视角视频根据左视角平稳变换矩阵渲染输出左视角输出视频，右视角视频根据右视角平稳变换矩阵渲染输出右视角输出视频；将左视角输出视频和右视角输出视频合成稳定的双目视频输出。

2.根据权利要求1所述的一种维持视差的双目视频稳像方法，其特征在于：主要包括以下几个步骤：

步骤S1：初始化相关参数；

步骤S2：将双目视频拆分为左视角视频和右视角视频，利用光流法和/或SIFT算法计算左视角视频与右视角视频的匹配特征点对；利用SIFT算法分别计算左视频前后相邻帧之间的左视匹配SIFT特征点和右视频前后相邻帧之间的右视匹配SIFT特征点；

步骤S3：利用视差计算模块逐帧计算左视角视频与右视角视频之间的原始视差；

步骤S4：利用多路径视频稳像模块分别将左视角视频和右视角视频的每一帧划分为N*N的网格并对左视角视频和右视角视频进行防抖处理，同时输出左视角平稳变换矩阵和右视角平稳变换矩阵，利用左视角平稳变换矩阵计算出左视角视频网格的对应位置；

步骤S5：利用视差变换模块对左视角平稳变换矩阵与原始视差进行处理得到视频稳像后的视差；

步骤S6：利用JDSW模块根据右视角平稳变换矩阵与视差计算出右视角视频网格的对应位置；

步骤S7：利用网格映射模块根据左视角视频网格的对应位置与右视角视频网格的对应位置分别渲染输出左视角的平稳视频和右视角的平稳视频；

步骤S8：将左视角的平稳视频和右视角的平稳视频合成双目视频输出。

3.根据权利要求2所述的一种维持视差的双目视频稳像方法，其特征在于：所述的步骤S3中，视差计算模块根据匹配特征点对计算t时刻下左视角视频与右视角视频在每一个匹配特征点对处的视差。

4.根据权利要求3所述的一种维持视差的双目视频稳像方法，其特征在于：所述的匹配特征点对包括稠密点对和稀疏点对；所述的稠密点包括利用光流法对左视角视频计算得出的左视稠密点和利用光流法对右视角视频计算得出的右视稠密点；所述的稀疏点对包括利用SIFT算法对左视角视频计算得出的左视稀疏点和利用SIFT算法对右视角视频计算得出的右视稀疏点。

5.根据权利要求2所述的一种维持视差的双目视频稳像方法，其特征在于：所述的步骤S4中，利用多路径视频稳像模块将左视角视频的每一帧划分为N*N的网格，根据Content-Preserving Warping变换方法利用左视匹配SIFT特征点引导网格变换并估算每一个网格的相机路径，利用网格的相机路径计算相应的平滑相机路径，使用平滑相机路径计算得出该网格的左视角平稳变换矩阵；对于右视角视频采用相同的方法计算出右视角平稳变换矩阵。

6.根据权利要求2或5所述的一种维持视差的双目视频稳像方法，其特征在于：所述的步骤S5中，利用视差变换模块计算出原始视差在左视角平稳变换矩阵的约束下进行变换后的视差。

7.根据权利要求2、3、4、5中任一项所述的一种维持视差的双目视频稳像方法，其特征在于：所述的步骤S2中，利用RANSAC算法剔除匹配特征点对中匹配错误的点对。