[发明专利]深度图像处理方法及深度图像处理系统

说明书

本发明提出一种深度图像处理方法及深度图像处理系统。深度图像处理方法包括：提取第一图像及第二图像；进行特征比对以获得第一图像及第二图像之间的多个特征对，其中每一特征对包括第一图像中的特征及第二图像中的对应特征；计算此些特征对的视差；当此些特征对的视差皆小于视差阈值时，藉由第一图像及第二图像计算深度图像。

技术领域

本发明涉及一种图像处理方法及图像处理系统，且特别涉及一种深度图像处理方法及深度图像处理系统。

背景技术

近年来，随着使用者体验需求的提高，深度图像技术逐渐变得热门。计算深度图像的方法包括使用结构光、时差测距(Time Of Flight；TOF)法、立体匹配(Stereo Matching)法等方法。立体匹配法是以左右图像的其中一张为基础，并且在另一张图像中寻找偏移量。例如，以左图像一个高度的框架为基础，并在右图像同样高度的位置将框架从最左边开始每次位移一个像素到最右边以逐一比对框架中的图像，再由比对结果中找出相似度最高者，求得左右图像框架的偏移量，再通过这些图像框架的偏移量来计算出深度图像。

由于上述方法需要将框架从图像的最左边移动到最右边，可能进行几百甚至上千次的计算之后才会得到一个偏移量，效率相当差，因此便产生了先将降低图像的解析度(down scale)再计算深度方法，例如将800*600的图像解析度降低到400*300再计算深度值。虽然此方法可减少计算量，但会造成远距离物体偏移量误差值的增大，导致无法分辨远距离物体在深度图像中的深度值。

另外，在数字相机中，如果拍摄的物体距离太近，会造成左右图像的视差较大，使得系统必须花费很多时间才能计算出深度图像。如此一来会造成使用者等待时间过长而降低使用者体验。因此，如何能在减少计算深度值的计算量的前提下同时能分辨远距离物体的深度值，以及当拍摄物体距离太近时自动进行判断并不进行深度图像的制作以减少使用者等待时间，是本领域技术人员所应致力的目标。

发明内容

本发明提出一种深度图像处理方法及深度图像处理系统，在减少深度图像计算时间的同时能保留远距离物体的细节，并防止拍摄物体距离过近而造成使用者浪费过长时间等待制作出具有破碎物体的深度图像。

本发明的一范例实施例提出一种深度图像处理方法，包括：提取第一图像及第二图像；进行特征比对以获得第一图像及第二图像之间的多个特征对，其中每一特征对包括第一图像中的特征及第二图像中的对应特征；计算此些特征对的视差；当此些特征对的视差皆小于视差阈值时，藉由第一图像及第二图像计算深度图像。

在本发明的一范例实施例中，上述特征对是选自对应于第一图像及第二图像的至少一感兴趣区域。

在本发明的一范例实施例中，上述的深度图像处理方法还包括计算对应第一图像的第三图像及对应第二图像的第四图像，其中第一图像及第二图像具有第一解析度，第三图像及第四图像具有第二解析度，且第二解析度小于第一解析度。

在本发明的一范例实施例中，上述的深度图像处理方法还包括：对第三图像及第四图像进行特征比对以获得第一深度图像，其中第一深度图像包括近距离特征及远距离特征，其中近距离特征的视差大于比对次数下限。

在本发明的一范例实施例中，上述对第三图像及第四图像进行特征比对以获得第一深度图像的步骤包括：对第三图像及第四图像进行特征比对以获得低解析深度图像，并藉由低解析深度图像获得具有第一解析度的第一深度图像。

在本发明的一范例实施例中，进行特征比对以获得第一图像及第二图像之间的多个特征对的步骤还包括在视差阈值内进行特征比对以获得第一图像及第二图像的远距离特征，并藉由第一图像及第二图像计算第二深度图像。

在本发明的一范例实施例中，上述的深度图像处理方法还包括：若第一深度图像的远距离特征的视差等于零，利用第二深度图像的远距离特征填补第一深度图像的远距离特征。