[发明专利]一种基于最小边界距离的视频拼接方法

说明书

技术领域

本发明涉及一种基于最小边界距离的视频拼接方法，属于图像处理和图像融合技术领域。

背景技术

随着国家经济的高速发展，交通工具、图像和视频应用在人们日常生活中的重要作用凸显，大视场图像与视频问题受到越来越多社会媒体和人们的关注。

视频拼接是通过两个或多个摄像头按照一定的相机标定技术，采集具有重叠区域的视频数据进行拼接，使输出的结果视域更广的技术。目前视频拼接技术及其应用是虚拟现实、计算机视觉等领域的新研究热点之一，主要应用于实况转播、视频监控、全景图融合、超大图像采样等方面。现有的视频拼接方法由于摄像机标定、图像配准和图像拼接的复杂性，使视频拼接在时间效率方面成为一个难点。

发明内容

发明目的：针对现有技术中存在的问题，本发明提供一种能够显著提高视频拼接成像效果的基于最小边界距离的视频拼接方法。

技术方案：一种基于最小边界距离的视频拼接方法，包括如下步骤：

步骤A：采集含有重叠区域的两段视频数据；

步骤B：对步骤A得到的视频帧数据分别进行中值滤波，得到高斯金字塔；

步骤C：将步骤B得到的高斯金字塔与图像数据结合卷积，获得步骤A得到的视频帧的尺度空间；

步骤D：对步骤C得到的尺度空间进行极值点检测，得到极大极小空间的极值点；

步骤E：对步骤D得到的极值点去除对比度小于0.03的关键点和不稳定的边缘响应点，得到确定关键点的位置和尺度；

步骤F：利用步骤E中关键点的位置和尺度，确定领域像素的梯度方向，得到关键点方向参数；

步骤G：将步骤F中得到的关键点方向参数和步骤E中关键点位置和尺度，在每4×4的小块上计算8个方向的梯度方向直方图，绘制每个梯度方向的累加值，形成一个种子点；一个关键点由2×2共四个种子点组成，每个种子点有8个方向向量信息；得到多组相互匹配的特征点描述子；

步骤H：将步骤G中得到的多组相互匹配的特征点描述子，使用随机抽样，并对多组相互匹配的特征点描述子进行精炼得到两幅视频帧中相互匹配的特征点描述子；

步骤I：利用步骤H中得到的相互匹配的特征点描述子，使用最小边界距离算法得到视频拼接的最终拼接结果。

进一步，步骤H中，所述特征点描述子匹配的方法为：

步骤H-1：随机选择4组相互匹配的特征点描述子组成一个随机样本并计算变换矩阵，计算其中的每组匹配点的特征点之间的距离，随后计算和变换矩阵一致的内点数，经过多次采样，选择内点数最多的变换矩阵，当内点数相等时，选择内点标准差最小的变换矩阵；

步骤H-2：采用迭代的方法精炼变换矩阵，所述迭代方法中采用LM算法最小化代价函数进行迭代精炼；

步骤H-3：用步骤H-2中精炼得到的变换矩阵定义附近的搜索区域，对匹配的特征点描述子进行精炼；

步骤H-4：反复迭代步骤H-2和H-3直到匹配点的特征点数目稳定。

采用这种方法可以有效的减少误匹配的点对。

进一步，步骤I中，所述最小边界距离算法的方法为：

步骤I-1：利用Sobel边缘检测算法提取各输入视频帧中物体边缘，由此得到重合区域的边缘差异；

步骤I-2：计算输入视频帧中重叠区域的所有匹配特征点的灰度差，并将之平均化；

步骤I-3：对步骤I-1得到的两幅视频帧中重叠区域的物体边缘进行比较，得到互不重合的边缘；

步骤I-4：计算输入视频帧自有的不重合边缘两侧像素点的灰度值，分别与输入视频帧中对应位置的像素点灰度值作差，得到的每一个差值都与步骤I-2中的平均灰度差比较；若不相等，则证明该像素点为输入视频帧中运动物体的构成像素点；依次处理其余像素点，直到其他边缘或重合区域边界为止；

步骤I-5：用步骤I-4同样的方法，计算另一幅输入视频帧中的各个像素点；

步骤I-6：通过加权平均公式、计算融合视频帧的其他像素点灰度值，最终得到融合视频。

采用这种方法更好的实现了消除鬼影的目的。

有益效果：与现有技术相比，本发明提供的基于最小边界距离的视频拼接方法，能够有效地克服光照、鬼影等客观因素的干扰，具有拼接效果优、计算简洁、参数设置简便等优点。

附图说明

图1为本发明的方法流程图；

图2为本发明的实施例中两幅输入视频帧；

图3为传统方法拼接后的视频帧；

图4为采用本发明方法拼接后的视频帧。

具体实施方式