[发明专利]一种图像对齐方法及其装置、计算机可读存储介质和计算机设备

权利要求书

1.一种图像对齐方法，其特征在于，包括以下步骤：

获取两帧图像之间的光流信息图，所述两帧图像均为彩色图像；

根据场景距离信息对光流信息图进行超像素自适应分割，获得多个超像素块区域；

计算每个超像素块区域的单应矩阵；

根据每个超像素块区域的单应矩阵，计算每个超像素块区域的映射图；

延拓各个超像素块区域的映射图的边缘，并融合得到所述两帧图像的对齐图像；

其中，所述两帧图像中的一帧图像为参考图像，一帧图像为匹配图像；

所述获取两帧图像之间的光流信息图，包括：以参考图像为基准，计算两帧图像之间的x方向光流图和y方向光流图，并根据x方向光流图和y方向光流图，计算光流信息图；

所述对光流信息图进行超像素自适应分割，获得多个超像素块区域，包括：根据光流信息图的距离信息以及像素邻近性信息，将光流信息图划分为多个超像素块区域；

所述计算每个超像素块区域的单应矩阵，包括：对每个超像素块区域的图像，采用特征点检测匹配算法，在对应的参考图像中计算每个超像素块区域的单应矩阵；

所述根据每个超像素块区域的单应矩阵，计算每个超像素块区域的映射图，包括：根据每个超像素块区域的单应矩阵，对匹配图像的相应区域的图像进行单应变换，得到匹配图像对应于每个超像素块区域的子区域映射图；

所述延拓各个超像素块区域的映射图的边缘，并融合得到所述两帧图像的对齐图像，包括：对匹配图像的各个子区域映射图进行边界延拓，对延拓后的每个子区域映射图的连接区域计算融合权重图，根据融合权重图对延拓后的映射图进行融合。

2.根据权利要求1所述的图像对齐方法，其特征在于，所述根据光流信息图的距离信息以及像素邻近性信息，将光流信息图划分为多个超像素块区域，包括：基于简单的线性迭代聚类SLIC超像素分割算法，根据光流信息图的距离信息以及像素邻近性信息，将光流信息图划分为多个超像素块区域。

3.根据权利要求1所述的图像对齐方法，其特征在于，所述以参考图像为基准，计算两帧图像之间的x方向光流图和y方向光流图，包括：基于深度学习的方法，以参考图像为基准，计算两帧图像之间的x方向光流图和y方向光流图。

4.根据权利要求1至3中任一项所述的图像对齐方法，其特征在于，所述两帧图像为多帧图像中的两帧图像，所述方法在所述获取两帧图像之间的光流信息图之前，还包括：从多帧图像中选取两帧图像，其中一帧图像作为参考图像，另一帧图像作为匹配图像。

5.根据权利要求4所述的图像对齐方法，其特征在于，在所述延拓各个超像素块区域的映射图的边缘，并融合得到所述两帧图像的对齐图像之后，还包括：判断多帧图像中是否有图像未进行对齐操作，如果有图像未进行对齐操作，则将融合得到的对齐图像作为参考图像，多帧图像中未进行对齐操作的图像中的一帧图像作为匹配图像，返回所述获取两帧图像之间的光流信息图的步骤继续执行。

6.根据权利要求1至3中任一项所述的图像对齐方法，其特征在于，光流信息图上每一个点的值为该点在x方向光流图中的值的平方与该点在y方向光流图的值的平方之和的平方根。