[发明专利]视频编码方法及视频编码装置

说明书

技术领域

本发明有关于三维视频编码。更具体地，本发明有关于3D和多视图视频编码中的参考图像选择和信令。

背景技术

三维(three-dimensional,3D)立体电视为近几年科技发展的趋势，其目的为带给观众惊艳的视觉体验。目前已开发各种技术用以致能3D立体视图，且与其他技术相比，多视图(multi-view)视频为3D电视应用的主要技术。传统视频为二维(two-dimensional，2D)媒介，其从摄影机的角度向观众提供场景的单一视图。然而，多视图视频可提供动态场景的任意视点(viewpoint)且为观众提供真实的感官。3D视频格式也可包括相应于对应纹理(texture)图像的深度图(depth map)。深度图也须进行编码以渲染(render)三维视图或多视图。

本领域已揭露各种技术以改进3D视频编码的编码效率。也存在发展活动以标准化(standardize)编码技术。例如，国际标准组织(International Organization for Standardization，ISO)内的工作组ISO/IEC JTC1/SC29/WG11正在开发基于3D视频编码标准的高效视频编码(High Efficiency Video Coding，HEVC)(称为3D-HEVD)。在3D和多视图编码中，由于所有摄影机从不同视点捕捉相同场景，多视图视频将包括大量的视图间冗余(inter-view redundancy)。为共享相邻视图的先前已编码冗余信息，当前区块(PU)的冗余信号可由视图间图像(inter-view picture)中的一或多个对应区块的冗余信号进行预测，其中，由视差矢量(disparity vector，DV)定位该一或多个对应区块。

图1为根据3D-HEVC的当前设计的先进冗余预测(advanced residual prediction，ARP)的实例示意图，其中，使用时间预测的当前视图中的冗余信号是由参考视图中的冗余预测信号预测的。ARP的主要过程可描述如下，以用于当前预测单元(prediction unit，PU)使用时间预测(即参考图像为时间参考图像)的情形：

1.使用运动矢量(表示为mvLX,X＝0或1)和当前视图(Vc)的当前图像(110)中的当前区块(Curr 112)的参考索引从当前区块(Curr 112)的位置定位(locate)当前视图(Vc)的参考图像(140)中的时间参考区块(CurrRef 142)。

2.使用当前区块(Curr 112)的推导DV 130从当前区块(Curr 112)的位置定位对应于当前区块(Curr 112)的参考视图的参考图像(120)中的对应区块(Base 122)。

3.通过再使用当前区块(Curr 112)的时间运动信息(即mvLX和参考索引)定位参考视图(Vr)中的对应区块(Base 122)的时间参考区块(BaseRef 152)。

4.为减少存储器的存取带宽，当权重因子不为0时，在根据当前3D-HEVC(HTM-9.0)标准执行运动补偿之前，对来自当前区块的运动矢量mvLX向固定参考图像进行缩放(scale)。具体地，将固定参考图像定义为每个参考图像列表的第一时间参考图像。

5.当前PU/区块的时间冗余信号的冗余预测项(predictor)可计算为参考视图中的两个独立区块之间的差值(即Base–BaseRef)。换言之，通过参考冗余(Base–BaseRef)计算当前冗余(Curr–CurrRef)。

图2为基于3D-HEVC的三维视频编码中ARP的预测结构的示例示意图。当当前视图使用视图间预测(即参考图像为视图间参考图像)而非时间预测时，ARP的主要过程可描述为如图2中所示。

1.由当前视图(Vc)中的当前图像(210)的当前区块(Curr 212)的视差运动矢量(230)定位参考视图(Vr)中的参考视图图像(220)的视图间参考区块(Base 222)。

2.使用时间运动矢量(mvLX)和参考索引定位参考视图中的视图间区块(Base 222)的时间参考区块(BaseRef 252)，其中，首先使用L0运动信息；如果L0运动信息不可用，则再使用L1运动信息。

3.通过再使用当前区块(212)的DV(230)从参考视图中的视图间参考区块(Base 222)的时间参考区块(BaseRef 252)的位置定位当前视图中的当前区块的当前参考区块(CurrRef 242)。