[发明专利]图像匹配方法和图像匹配装置

权利要求书

1.一种图像匹配方法，应用于一多重成像设备，所述多重成像设备包括全景相机和非全景相机，所述方法包括：

由所述全景相机拍摄全景图像，并且由所述非全景相机拍摄非全景图像；

将所述全景图像变换为透视图；

确定全景相机与非全景相机间的相对角度，并查找与之对应的单应矩阵；

通过利用所述单应矩阵将所述非全景图像投影到所述透视图的对应区域，来实现所述非全景图像与所述透视图之间的图像匹配；

将投影后的非全景图像与所述透视图叠加；以及

将叠加后的图像反变换回全景图像。

2.根据权利要求1所述的方法，其中在由所述全景相机拍摄全景图像之前，所述方法进一步包括：

将所述全景相机和所述非全景相机设置到特定相对角度；

由所述全景相机拍摄测试全景图像，并且由所述非全景相机拍摄测试非全景图像；

将所述测试全景图像变换为测试透视图；

标注所述测试透视图与所述测试非全景图像中的对应特征点；

基于所述对应特征点确定单应矩阵，其中通过所述单应矩阵能够将所述测试非全景图像投影到所述测试透视图的对应区域以实现所述测试非全景图像与所述测试透视图之间的图像匹配；以及

将所确定的单应矩阵与所述特定相对角度相关联地存储。

3.根据权利要求2所述的方法，其中由所述全景相机拍摄测试全景图像的步骤进一步包括由所述全景相机拍摄关于一校正板的图像，并且由所述非全景相机拍摄测试非全景图像的步骤进一步包括由所述非全景相机拍摄关于同一校正板的图像。

4.根据权利要求1所述的方法，其中所述非全景相机为能够变焦的相机，且所述方法进一步包括：

保持所述全景相机与所述非全景相机间的所述相对角度不变，由所述非全景相机拍摄多个变焦图像；

通过利用所述单应矩阵将所述多个变焦图像投影到所述透视图的对应区域，来实现所述多个变焦图像与所述透视图之间的图像匹配；以及

将在该相对角度处拍摄的多个图像相关联，并基于投影后的多个变焦图像，响应于用户的输入而呈现放大和/或缩小效果。

5.根据权利要求1所述的方法，其中所述非全景相机为光场相机，且所述方法进一步包括：

保持所述全景相机与所述非全景相机间的所述相对角度不变，由所述光场相机拍摄多深度和/或多视角图像；

通过利用所述单应矩阵将所述多深度和/或多视角图像投影到所述透视图的对应区域，来实现所述多深度和/或多视角图像与所述透视图之间的图像匹配；以及

将在该相对角度处拍摄的多个图像相关联，并基于投影后的多深度和/或多视角图像，响应于用户的输入而呈现多深度和/或多视角效果。

6.一种图像匹配装置，应用于一多重成像设备，所述多重成像设备包括全景相机和非全景相机，其中所述全景相机用于拍摄全景图像，而所述非全景相机用于拍摄非全景图像，所述装置包括：

存储单元，用于相关联地存储所述全景相机与所述非全景相机的相对角度和对应的单应矩阵；

第一变换单元，用于将由所述全景相机拍摄的所述全景图像变换为透视图；

角度确定单元，用于确定全景相机与非全景相机间的相对角度；

查找单元，用于基于所述相对角度，查找与之对应的单应矩阵；

匹配单元，用于通过利用所述单应矩阵将所述非全景图像投影到所述透视图的对应区域，来实现所述非全景图像与所述透视图之间的图像匹配；

叠加单元，用于将投影后的非全景图像与所述透视图叠加；以及

第二变换单元，用于将叠加后的图像反变换回全景图像。