[发明专利]一种联合空间时间轴的双视点立体视频稳定方法

摘要

本发明公开了一种联合空间时间轴的双视点立体视频稳定方法，首先分别对输入的左右视频做时间轴维度的视频稳定，利用特征点匹配估计出视频的帧间运动轨迹，通过卡尔曼滤波和低通滤波平滑运动轨迹并填补视频中丢失像素。然后对左右视进行空间轴维度的视频稳定，计算稳定后的左右视频中匹配特征点的垂直视差，根据该视差进行实时校正，减少左右视频之间的垂直视差。最后分别对左右视频进行稳定调整，进一步提高视频的稳定性。本发明是一种视频稳定性能好、鲁棒性高的视频稳定方法，能够对由相机抖动、相机内部感光元件的不一致性以及当前工艺的不精确所导致的左右视点间的垂直视差进行修正，可提高观看3D视频的舒适度。

主权项

1.一种联合空间时间轴的双视点立体视频稳定方法，其特征在于，包括以下步骤：步骤1：对双视点视频分别进行时间轴维度的视频稳定：首先分别对左右双视点的连续视频帧提取特征点，剔除错误匹配的特征点，得到准确的特征点匹配；再根据准确的特征点匹配估计视频的帧间运动轨迹，然后利用滤波的方法去除视频中的高频部分，平滑输入视频的帧间运动轨迹并填补视频中丢失像素，保持输入视频的分辨率；步骤2：对双视点视频进行空间轴维度的视频稳定：对经过步骤1处理后的左右视频进行空间轴维度的视频稳定，减少左右视频之间的垂直视差，提高3D视频的观看舒适度；首先对同一时刻的左右视频帧提取特征点，剔除不准确特征点匹配，得到左右双视点的准确特征点匹配；然后分别计算准确的匹配特征点在垂直方向上的视差，采用统计特征点垂直视差直方图的方法作为校正指标；最后根据得到的左右视频间的垂直视差进行实时校正，减少左右视频之间的垂直视差；步骤3：视频稳定调整：对步骤2得到的视频使用光流法寻找前后相邻帧之间的变换Toriginal_transformation，并且该变换只包含三个参数：水平平移dx、垂直平移dy、旋转角度dα；累计dx、dy、dα得到视频帧之间的运动轨迹∑dx、∑dy、∑dα；采用窗口方法平滑视频帧之间的运动轨迹并且得到参数dx_avg、dy_avg、dα_avg；结合上述参数得到新的变换，新变换参数dx_new、dy_new、dα_new为：dx_new＝dx+(dx_avg‑∑dx)dy_new＝dy+(dy_avg‑∑dy)dα_new＝dα+(dα_avg‑∑dα)最终得到新变换矩阵Tnew_transformation；具体变换公式为：将Tnew_transformation作用在步骤2输出视频上得到最后视频稳定结果。