[发明专利]视差图空洞填充方法、装置及电子设备及存储介质

说明书

本申请实施例提供了视差图空洞填充方法、装置，该方法包括：对于每一个待填充像素，确定待填充像素的左侧有效视差像素和待填充像素的右侧有效视差像素；计算待填充像素对应的视差值差异量和所述待填充像素对应的原图像素值差异量，基于待填充像素对应的视差值差异量和待填充像素对应的原图像素值差异量，计算待填充像素的视差估计值；将至少部分待填充像素的视差估计值作为待填充像素的视差值。同时考虑了待填充像素的两侧的有效视差像素的视差值的差异与待填充像素的视差值的关联性、两侧的有效视差像素对应的原图像素的像素值的差异与待填充像素的视差值的关联性。避免条纹瑕疵情况和高亮斑点情况，以较短的耗时完成视差图空洞填充。

技术领域

本申请涉及图像处理领域，具体涉及视差图空洞填充方法、装置及电子设备存储介质。

背景技术

视差图是在立体匹配技术中用于表示目标图像与参考图像之间的平移关系的图像。立体匹配技术中的一致性检测、遮挡检测、误匹配检测等步骤均依赖于视差图。由于参考图像里不包含目标图像里所需的全部信息，导致目标图像里出现空洞，视差图中包括与目标图像的空洞相对应的待填充区域。在利用视差图进行立体匹配技术中的依赖视差图进行的步骤之前，需要对视差图中的待填充区域进行视差图空洞填充，即对于视差图中的待填充区域中的每一个待填充像素，重新确定该待填充像素的视差值，以使得该待填充像素具有确定出的视差值。

目前，通常采用扫描线填充算法或变尺寸平均值滤波算法进行视差图空洞填充。扫描线填充算法对于待填充区域中的待填充像素，均直接选取左侧的有效视差值和右侧的有效视差值中的最小值，导致产生明显的条纹瑕疵现象。变尺寸平均值滤波算法是通过从大到小的平均值滤波窗口对待填充区域进行迭代地滤波，以确定每一个待填充像素的视差值，一方面，对于每一个待填充像素，均需要经过多次迭代滤波之后才能确定待填充像素的视差值，导致视差图空洞填充的耗时较长。另一方面，在确定的视差值错误的像素处会出现高亮斑点。

发明内容

本申请实施例提供一种视差图空洞填充方法、装置、电子设备及电子设备存储介质。

本申请实施例提供一种视差图空洞填充方法，包括：

对于视差图的待填充区域中的每一个待填充像素，确定所述待填充像素的左侧有效视差像素和所述待填充像素的右侧有效视差像素；

对于所述每一个待填充像素，计算所述待填充像素对应的视差值差异量和所述待填充像素对应的原图像素值差异量，其中，所述待填充像素对应的视差值差异量为所述待填充像素的左侧有效视差像素的视差值与所述待填充像素的右侧有效视差像素的视差值之间的差异量，所述待填充像素对应的原图像素值差异量为所述待填充像素的左侧有效视差像素对应的原图像素的像素值与所述待填充像素的右侧有效视差像素对应的原图像素的像素值之间的差异量；

对于所述每一个待填充像素，基于所述待填充像素对应的视差值差异量和所述待填充像素对应的原图像素值差异量，计算所述待填充像素的视差估计值；

对于至少部分待填充像素中的每一个待填充像素，将所述待填充像素的视差估计值作为所述待填充像素的视差值。

本申请实施例提供一种视差图空洞填充装置，包括：

有效视差像素确定单元，被配置为对于视差图的待填充区域中的每一个待填充像素，确定所述待填充像素的左侧有效视差像素和所述待填充像素的右侧有效视差像素；

差异量计算单元，被配置为对于所述每一个待填充像素，计算所述待填充像素对应的视差值差异量和所述待填充像素对应的原图像素值差异量，其中，所述待填充像素对应的视差值差异量为所述待填充像素的左侧有效视差像素的视差值与所述待填充像素的右侧有效视差像素的视差值之间的差异量，所述待填充像素对应的原图像素值差异量为所述待填充像素的左侧有效视差像素对应的原图像素的像素值与所述待填充像素的右侧有效视差像素对应的原图像素的像素值之间的差异量；