[发明专利]基于深度的块分割方法和电子装置

说明书

本发明提供一种基于深度的块分割方法，用于多视图编解码或三维视频编解码中，该基于深度的块分割方法包括：接收与依赖视图中当前纹理块有关的输入数据；在参考视图中为该当前纹理块确定对应的深度块或参考纹理块；基于该对应的深度块或该参考纹理块获取统一的代表值；由该对应的深度块或该参考纹理块采用该统一的代表值生成当前分段掩膜；基于该对应的深度块或该参考纹理块以及该统一的代表值，从块分割候选中选择当前块分割；其中该选择该当前块分割包括在该对应的深度块或该参考纹理块的多个固定位置处比较所选像素；以及根据生成的该当前分段掩膜和选择的该当前块分割，对该当前纹理块进行基于深度的块分割编码或解码。通过利用本发明，可降低编解码的计算复杂度。

技术领域

本发明有关于三维(three-dimensional,3D)和多视图(multi-view)视频编码，且尤其有关于采用基于深度的块分割(Depth-Based Block Partitioning，DBBP)以改进编码效率的纹理(texture)编码。

背景技术

近些年3D电视(television，TV)已成为技术潮流，其可带给观看者非常好的观看体验。已开发多种技术以用于3D观看，其中，多视图视频尤其是用于3DTV的一个关键技术。传统视频为2D媒体，只能提供观看者摄像机角度的一场景的单一视图。然而，3D视频可提供动态场景的任意视点(viewpoint)，并提供给观看者真实的感觉。

3D视频通常通过采用视频摄像机捕捉一场景并采用相关装置捕捉深度信息而建立，或通过同时采用多个相机捕捉一场景而建立，其中多个相机被适当放置，使得每个相机可从一个视点捕捉该场景。对应于场景的纹理数据和深度数据通常展现出实质关联。因此，深度信息可用来改进纹理数据的编码效率或降低纹理数据的处理复杂度，反之亦然。举例来说，纹理块的对应的深度块可揭示对应于像素级(pixel level)对象分段(objectsegmentation)的类似信息。因此，深度信息可帮助实现像素级基于分段的(segment-based)运动补偿。相应地，在当前基于高效视频编码(High Efficiency Video Coding,HEVC)的3D视频编码(3D video coding based on HEVC,3D-HEVC)中，采用DBBP进行纹理编码。

当前DBBP包括虚拟深度获取、块分段、块分割和双分段(bi-segment)补偿的步骤。首先，采用相邻块的视差矢量(Disparity Vector From Neighboring Blocks，NBDV)获取当前纹理块的虚拟深度。获取的视差矢量用来由当前纹理块的位置在参考视图中对深度块进行定位。参考视图可为基准视图(base view)。在参考视图中已定位的深度块随后被用作虚拟深度块，用于对当前纹理块编码。虚拟深度块用来获取并置(collocated)纹理块的块分段，其中块分段可为非矩形。虚拟深度块的均数(mean)值被确定。通过将虚拟深度值与均数值进行比较，块的每个像素的二值化分段掩膜(binary segmentation mask)得以生成。均数值用来与每个虚拟深度值比较，以生成掩膜值。若左上角虚拟深度值大于均数值，所有对应于大于的深度值的分段掩膜值为0，而所有对应于小于的深度值的分段掩膜值为1。图1A-B是基于虚拟深度块的块分段的示范性示意图。图1A是为依赖视图中的当前纹理块在参考视图中获取对应的深度块的获取进程的示范性示意图。图1B是基于依赖视图中当前纹理块的在参考视图中对应的深度块生成分段掩膜的获取进程的示范性示意图。在图1A中，基于依赖视图中当前纹理块110的位置和获取的DV112，在参考视图中对当前纹理块110的对应的深度块120进行定位，其中DV112根据3D-HEVC采用NBDV获取。在步骤140中，确定虚拟深度块的均数值。在步骤150中，虚拟深度像素的值与平均深度值进行比较，以生成分段掩膜160。如图1B中两种不同的线型所示，分段掩膜以二进制数据表示，以指示底层像素(underlying pixel)属于分段1还是分段2。