[发明专利]一种对DIBR技术生成的目标图像进行空洞填充的方法

权利要求书

1.一种对DIBR技术生成的目标图像进行空洞填充的方法，其特征在于，包括以下步骤：

(1)、检测较大空洞

按行以从左到右的顺序遍历视差图，若连续出现阈值点数len bighole个及其以上的空洞点，则认为此处是较大空洞，记录下该较大空洞的起点和终点；

(2)、膨胀较大空洞

区分目标图像是左视图还是右视图，如果是左视图，执行步骤a)；如图是右视图，执行步骤b)；

a)、首先区分较大空洞边缘区域是背景像素点还是前景像素点：以视差图中的较大空洞区域为中心，从左向右检测较大空洞右边缘非空洞点的视差值变化，当视差值在两相继的非空洞点处第一次出现跃变，并且跃变是从较小值跃变到较大值时，较大空洞右边缘区域为背景像素点，并记录下该较大视差值作为前景像素点视差值；当视差值在两相继的非空洞点处第一次出现跃变，并且跃变是从较大值跃变到较小值，或者视差值一致没有跃变时，较大空洞右边缘区域为前景像素点，并记录下第一个非空洞点的视差值作为前景像素点视差值；

然后膨胀空洞边缘：若较大空洞右边缘区域为背景像素点，则较大空洞左右边缘为匹配误差区域，需要进行膨胀，将较大空洞的起点横坐标减去l个像素点和终点横坐标加上l个像素点作为目标图像中需要填充的空洞的起点和终点；若较大空洞右边缘区域为前景像素点，则较大空洞的左边缘为匹配误差区域，只膨胀较大空洞的左边缘，将较大空洞的起点横坐标减去l个像素点和终点维持不变作为目标图像中需要填充的空洞的起点和终点；

b)、首先区分较大空洞边缘区域是背景像素点还是前景像素点：以视差图中的较大空洞区域为中心，从右向左检测较大空洞左边缘非空洞点的视差值变化，当视差值在两相继的非空洞点处第一次出现跃变时，并且跃变是从较大值跃变到较小值时，较大空洞左边缘区域为背景像素点，并记录下该较小视差值作为前景像素点视差值；当视差值在两相继的非空洞点处第一次出现跃变，并且跃变是从较小值跃变到较大值，或者视差值一致没有跃变，较大空洞左边缘区域为前景像素点，并记录下第一个非空洞点的视差值作为前景像素点视差值；

然后膨胀较大空洞边缘：若较大空洞左边缘区域为背景像素点，则较大空洞左右边缘为匹配误差区域，需要进行膨胀，将较大空洞的起点横坐标减去l个像素点和终点横坐标加上l个像素点作为目标图像中需要填充的空洞的起点和终点；若较大空洞左边缘区域为前景像素点，则较大空洞的右边缘为匹配误差区域，只膨胀较大空洞的右边缘，将较大空洞的起点维持不变和终点横坐标加上l个像素点作为目标图像中需要填充的空洞的起点和终点；

在本步骤(2)中，膨胀的像素点个数l为误匹配像素点的个数，与深度图像估计的准确度有关，可根据生成的目标图像质量来调节，取值范围为0-7；

(3)、填充较大空洞

将目标图像中需要填充的空洞的起点、终点横坐标均减去前景像素点的视差值，得到需要在参考图像中复制的像素点区域，然后，从参考图像中复制该区域的像素点填充到目标图像中需要填充的空洞区域。

2.根据权利要求1所述的对DIBR技术生成的目标图像进行空洞填充的方法，其特征在于，还包括步骤(4)：在视差图中，将较小空洞的视差值d取为与较小空洞右边缘第一个非空洞点的视差值，然后，依据视差值在参考图像中，将对应像素点填充到该较小空洞中即可。

3.根据权利要求1所述的对DIBR技术生成的目标图像进行空洞填充的方法，其特征在于，在步骤(1)之前，在三维图像变换过程中先将参考图像复制到目标图像，再进行三维图像变换，然后将得到的目标图像采用步骤(1)～(3)的方法进行处理。