[发明专利]双目视觉立体匹配方法、装置、电子设备及存储介质

说明书

本申请实施例提供了双目视觉立体匹配方法、装置、电子设备及存储介质，所述方法包括：分别以左图像和右图像为参考图，确定在各个视差值下的第一初始匹配代价矩阵和第二初始匹配代价矩阵；分别对在各个视差值下的第一初始匹配代价矩阵和第二初始匹配代价矩阵进行代价聚合，得到在各个视差值下的第一聚合匹配代价矩阵和第二聚合匹配代价矩阵；分别基于在各个视差值下的第一聚合匹配代价矩阵和第二聚合匹配代价矩阵，计算出第一初始视差图和第二初始视差图；分别对第一初始视差图和第二初始视差图中每一像素点的视差值进行亚像素级别处理，得到第一中间视差图和第二中间视差图；对第一中间视差图和第二中间视差图进行一致性校正，得到最终视差图。

技术领域

本申请涉及计算机视觉技术领域，尤其涉及一种双目视觉立体匹配方法、装置、电子设备及存储介质。

背景技术

立体匹配是双目视觉技术实现过程中最困难也是最重要的一步，目前，立体匹配算法包含全局立体匹配算法、半全局立体匹配算法和局部立体匹配算法三种，其中局部立体匹配算法以其高精度、低耗时获得了最为广泛的应用。此外，立体匹配的算法类型很多，比如基于区域的匹配算法、基于特征的匹配算法等，其中，基于区域的匹配算法应用最为广泛，此类算法通过对比两个区域中像素值的相关度来判断区域中像素点之间的对应性，常用的算法包括SAD(Sum of Absolute Difference)、NCC(Normalized CrossCorrelation)、Census变换、Rank变换等。但是，在很多场景下，现有的双目视觉立体匹配算法的匹配率较低，因此，如何实现高精度的双目立体视觉匹配，成为亟待解决的问题。

发明内容

本申请提供一种双目视觉立体匹配方法、装置、电子设备及存储介质，以实现高精度的双目立体视觉匹配。

本申请提供一种双目视觉立体匹配方法，包括：

获取左图像和右图像；

分别以所述左图像和所述右图像为参考图，基于所述左图像和所述右图像中的待匹配区域之间的相关系数，确定在各个视差值下的第一初始匹配代价矩阵和第二初始匹配代价矩阵；

采用包滤波器分别对在各个视差值下的第一初始匹配代价矩阵和第二初始匹配代价矩阵进行代价聚合，得到在各个视差值下的第一聚合匹配代价矩阵和第二聚合匹配代价矩阵；

分别基于在各个视差值下的第一聚合匹配代价矩阵和第二聚合匹配代价矩阵，计算出第一初始视差图和第二初始视差图；

采用线性差值分别对所述第一初始视差图和所述第二初始视差图中每一像素点的视差值进行亚像素级别处理，得到第一中间视差图和第二中间视差图；

对所述第一中间视差图和所述第二中间视差图进行一致性校正，得到最终视差图。

根据本申请提供的一种双目视觉立体匹配方法，所述采用线性差值分别对所述第一初始视差图和所述第二初始视差图中每一像素点的视差值进行亚像素级别处理，得到第一中间视差图和第二中间视差图，包括：

基于在与所述第一初始视差图中每一像素点的视差值数值相邻的视差值下对应像素点的第一聚合匹配代价，对所述第一初始视差图中每一像素点的视差值进行亚像素级别处理，得到所述第一中间视差图；

基于在与所述第二初始视差图中每一像素点的视差值数值相邻的视差值下对应像素点的第二聚合匹配代价，对所述第二初始视差图中每一像素点的视差值进行亚像素级别处理，得到所述第二中间视差图。

根据本申请提供的一种双目视觉立体匹配方法，所述第一中间视差图中每一像素点的视差值基于如下公式确定：