[发明专利]用于使用可见性能量模型估计视差的设备和方法

说明书

技术领域

一个或多个实施例涉及一种用于基于使用动态编程(DP)的能量模型估计立体图像中的视差的设备和方法。

背景技术

为了产生三维(3D)图像，从彩色图像恢复深度信息是必需的。具体地，正在研发用于从由两个图像(即，左图像和右图像)构成的立体图像恢复深度信息的技术。需要提取左图像和右图像之间的视差以恢复深度信息。

根据现有技术，在整个图像中应用同一能量模型。因此，由于闭合区域(occlusion region)不包括左图像和右图像之间的匹配区域，所以难以提取闭合区域中的视差。

因此，需要用于即使在不存在左图像和右图像之间的匹配点的闭合区域中也更加准确地提取视差的技术。

发明内容

可通过一种视差估计设备的一个或多个实施例来克服以上描述的问题和/或实现其它方面，所述视差估计设备可包括：能量计算器，计算与构成立体图像的左图像和右图像中的每一个的立体匹配有关的能量；映射产生器，使用所述能量产生用于确定左图像和右图像之间的视差的误差的可见性映射；能量重新计算器，重新计算与包括由于可见性映射中的视差的误差而产生的可见性误差的区域有关的能量；视差确定器，使用左图像和右图像中的每一个的最终能量从立体图像确定视差。

可通过一种视差估计设备的一个或多个实施例来克服以上描述的问题和/或实现其它方面，所述视差估计设备可包括：能量计算器，并行计算与构成立体图像的左图像和右图像中的每一个的立体匹配有关的能量；映射产生器，使用所述能量产生用于确定左图像和右图像之间的视差的误差的可见性映射；能量重新计算器，重新计算与包括由于左图像和右图像中的每一个的可见性映射中的视差的误差而产生的可见性误差的区域有关的能量；视差确定器，使用左图像和右图像中的每一个的最终能量执行局部匹配，并从局部匹配后的立体图像确定视差。

可通过一种视差估计方法的一个或多个实施例来克服以上描述的问题和/或实现其它方面，所述视差估计方法可包括：计算与构成立体图像的左图像和右图像之间的立体匹配有关的能量；使用所述能量产生用于确定左图像和右图像之间的视差的误差的可见性映射；重新计算与包括由于可见性映射中的视差的误差而产生的可见性误差的区域有关的能量；使用左图像和右图像中的每一个的最终能量从立体图像确定视差。

可通过一种视差估计方法的一个或多个实施例来克服以上描述的问题和/或实现其它方面，所述视差估计方法可包括：并行计算与构成立体图像的左图像和右图像中的每一个的立体匹配有关的能量；使用所述能量产生用于确定左图像和右图像之间的视差的误差的可见性映射；重新计算与包括由于左图像和右图像中的每一个的可见性映射中的视差的误差而产生的可见性误差的区域有关的能量；使用左图像和右图像中的每一个的最终能量执行局部匹配，并从局部匹配后的立体图像确定视差。

一个或多个实施例的其它方面、特点和/或优点将在以下的描述中部分被阐述，从描述中部分将是显然的，或者可通过本公开的实施而得知。一个或多个实施例包括这样的其它方面。

有益效果

根据一个或多个实施例，可针对产生可见性误差的区域来构造新的能量模型，可将平滑代价(smoothness cost)优选地应用于产生可见性误差的闭合区域中的能量模型的匹配代价(matching cost)。因此，可更加准确地执行针对闭合区域的视差的提取。

附图说明

通过下面结合附图进行的对实施例的描述，这些和/或其它方面和优点将变得清楚和更容易理解，其中：

图1是根据一个或多个实施例的视差估计设备的框图；

图2是示出根据一个或多个实施例的立体匹配的示图；

图3是示出根据一个或多个实施例的通过动态编程(DP)估计的视差映射(disparity map)的示图；

图4是示出根据一个或多个实施例的视差估计设备的能量计算器的框图；

图5是根据一个或多个实施例的用于描述沿向前的方向计算能量的处理的示图；

图6是根据一个或多个实施例的用于描述考虑向前的方向和向后的方向两者来计算能量的处理的示图；

图7是示出根据一个或多个实施例的映射产生器的框图；

图8是示出根据一个或多个实施例的映射确定器的框图；

图9是示出根据一个或多个实施例的能量重新计算器(energy recalculator)的框图；

图10是示出根据一个或多个实施例的使用向前的能量确定的视差映射的示图；

图11是示出根据一个或多个实施例的使用向后的能量确定的视差映射的示图；