[发明专利]一种图像拼接处理的方法及设备

说明书

技术领域

本发明涉及全景图像处理技术领域，尤其涉及一种图像拼接处理的方法及设备。

背景技术

现有的非实时全景拼接技术中，对于全景视频中的每帧全景图像通常都是由多幅图像拼接而成，而每帧全景图像中的每两幅相交图像之间会存在拼接缝，使得全景视频中的每帧全景图像均存在至少一个拼接缝。

由于全景视频中的每帧全景图像均存在至少一个拼接缝，而在全景视频存在移动的物体时，该物体穿过拼接缝时现有技术中并没有进行任何处理，使得物体直接穿过拼接缝，而此时，会存在物体穿过拼接缝时出现不自然的类似于空间折叠的现象的问题。

发明内容

本发明提供一种图像拼接处理的方法及设备，能够在物体穿过拼接缝或即将穿过拼接缝的时候，重新计算出新拼接缝使得物体穿过缝之前让拼接缝全部或部分绕过物体，降低物体穿过拼接缝出现不自然现象的类似于空间折叠的现象的概率。

本申请实施例提供了一种图像拼接处理的方法，包括：

获取组成全景柱面投影视频的每帧全景柱面投影图像的所有拼接缝；

利用相邻多帧全景柱面投影图像，计算出每帧全景柱面投影图像中的运动前景图像及其运动方向；

检测每帧全景柱面投影图像中的运动前景图像是否与拼接缝有交点；

在检测到某帧全景柱面投影图像中的运动前景图像与拼接缝有交点时，从与拼接缝有交点的运动前景图像中确定位于所述运动方向的反方向上的最外侧像素点；

基于梯度法，以所述最外侧像素点为起点沿上下方向查找到一个新拼接缝，将所述新拼接缝代替与运动前景图像有交点的拼接缝。

可选的，所述检测在每帧全景柱面投影图像中的运动前景图像是否与拼接缝有交点，具体包括：

获取每帧全景柱面投影图像中的运动前景图像的最外围的像素点组成的轮廓点集；

从每帧全景柱面投影图像的轮廓点集中获取与所述运动方向的同向侧的所有像素点组成同向侧像素点集；

检测每帧全景柱面投影图像中的同向侧像素点集中的每个像素点是否与拼接缝有交点。

可选的，所述检测每帧全景柱面投影图像中的同向侧像素点集中的每个像素点是否与拼接缝有交点，具体包括：

检测每帧全景柱面投影图像中的同向侧像素点集中的每个像素点是否与位于运动前景图像运动方向上的最近拼接缝有交点。

可选的，所述基于梯度法，以所述最外侧像素点为起点沿上下方向查找到一个新拼接缝，具体包括：

基于梯度下降法，以所述最外侧像素点为起点沿上下方向查到所述新拼接缝。

可选的，所述利用相邻多帧全景柱面投影图像，计算出每帧全景柱面投影图像中的运动前景图像及其运动方向，具体包括：

获取运动前景图像的质心在相邻多帧全景柱面投影图像中的位置变化信息；

根据所述位置变化信息，计算出每帧全景柱面投影图像中的运动前景图像及其运动方向。

本发明另一方面还提供了一种图像拼接处理设备，包括：

拼接缝获取单元，用于获取组成全景柱面投影视频的每帧全景柱面投影图像的所有拼接缝；

运动方向计算单元，用于利用相邻多帧全景柱面投影图像，计算出每帧全景柱面投影图像中的运动前景图像及其运动方向；

交点检测单元，用于检测每帧全景柱面投影图像中的运动前景图像是否与拼接缝有交点；

最外侧像素点查找单元，用于在检测到某帧全景柱面投影图像中的运动前景图像与拼接缝有交点时，从与拼接缝有交点的运动前景图像中确定位于所述运动方向的反方向上的最外侧像素点；

拼接缝处理单元，用于基于梯度法，以所述最外侧像素点为起点沿上下方向查找到一个新拼接缝，将所述新拼接缝代替与运动前景图像有交点的拼接缝。

可选的，所述交点检测单元包括：

轮廓点集获取子单元，用于获取每帧全景柱面投影图像中的运动前景图像的最外围的像素点组成的轮廓点集；

同向侧像素点集获取子单元，用于从每帧全景柱面投影图像的轮廓点集中获取与所述运动方向的同向侧的所有像素点组成同向侧像素点集；

交点检测子单元，用于检测每帧全景柱面投影图像中的同向侧像素点集中的每个像素点是否与拼接缝有交点。

可选的，所述交点检测子单元，具体用于检测每帧全景柱面投影图像中的同向侧像素点集中的每个像素点是否与位于运动前景图像运动方向上的最近拼接缝有交点。