[发明专利]深度图处理的方法和设备

说明书

相关申请的交叉引用

本申请要求如下每个美国临时申请的提交日的权益，其通过引用而被整体合并于此：

（1）序列号61/278,989，于2009年10月14日提交，以及发明名称为“Coding and Decoding Depth Maps”；

（2）序列号61,278,984，于2009年10月14日提交，以及发明名称为“Upsampling Depth Maps Using Video Data”；

（3）序列号61/279,672，于2009年10月23日提交，以及发明名称为“Joint Filtering For Depth Map Coding”；

（4）序列号61/284,272，于2009年12月16日提交，以及发明名称为“Joint Trilateral Filtering for Depth Compression”；

（5）序列号61/336,380，于2010年1月21日提交，以及发明名称为“Coding Depth Information”；

（6）序列号61/337,059，于2010年1月29日提交，以及发明名称为“Adaptive Joint Filters”；

（7）序列号61/337,375，于2010年2月3日提交，以及发明名称为“Sparse Dyadic Mode for Depth Compression”；以及

（8）序列号61/325,017，于2010年4月16日提交，以及发明名称为“Processing Depth Maps”。

技术领域

本文描述涉及三维视频的实现。各种具体实现涉及深度图和边缘编码。

背景技术

诸如多视角加深度（MVD）和分层深度视频（LDV）那样的，包括传统2D（二维）视频和相应深度图的新数据格式使诸如3DTV（三维电视）和自由视点视频（FVV）那样的新应用成为可能。在像3DTV和FVV那样的视频应用中，再现除了捕获、编码和解码视图之外的虚拟视图通常是重要的。基于深度图像的再现（DIBR）是已经研究了许多年的再现虚拟视图的技术。为了在再现视图中达到足够高的质量，优选的是良好保护深度边界。传统视频编解码技术通常导致围绕锐边的巨大伪像。深度边缘的如实表示通常花费比编码其它区域多得多的位。

发明内容

按照一个一般方面，访问深度画面的一部分。所述深度画面包括指示图像画面中的相应地点的深度的信息。将所述深度画面的所述部分划分成多个分区。根据所述图像画面细化所述多个分区，以提供细化分区。根据所述细化分区编码所述深度画面的所述部分，以提供编码部分。

按照另一个一般方面，访问编码深度画面的一部分。所述深度画面包括指示图像画面中的相应地点的深度的信息。所述编码包括指示所述部分的多个分区的强度值的一个或多个数值指示符的编码。识别所述多个分区的至少一个。根据所述图像画面细化所述至少一个分区，解码所述一个或多个数值指示符的编码。根据所述一个或多个解码数值指示符为所述细化部分中的像素确定数值。

按照另一个一般方面，访问深度画面的一部分。所述深度画面包括指示图像画面中的相应地点的深度的信息。滤波所述部分以产生滤波深度部分。所述滤波深度部分中的给定像素基于所述部分中的一定范围像素的数值。产生给定像素包括通过基于至少三种成分的权重加权所述范围内的特定像素的数值。第一种成分是从特定像素的地点到所述部分中与给定像素相对应的像素的地点之间的距离。第二种成分是特定像素的数值与所述部分中与给定像素相对应的像素的数值之间的深度差。第三种成分是图像画面中与特定像素的地点相对应的像素的数值与图像画面中与给定像素的地点相对应的像素的数值之间的图像差。

按照另一个一般方面，接收编码下采样深度图像。解码所述下采样深度图像。滤波所述解码下采样深度图像的一部分，以产生上采样的滤波深度部分。所述滤波深度部分中的给定像素基于所述部分中的一定范围像素的数值。产生给定像素包括通过基于至少两种成分的权重加权所述范围内的特定像素的数值。第一种成分是从特定像素的地点到所述部分中与给定像素相对应的像素的地点之间的距离。第二种成分是图像画面中与特定像素的地点相对应的像素的数值与图像画面中与给定像素的地点相对应的像素的数值之间的图像差。