[发明专利]用于多视点视频编码中的亮度补偿的方法和设备

说明书

技术领域

本发明涉及多视点视频编码(MVC)，更具体地说，涉及用于在多视点视 频编码中的亮度补偿的处理期间获取预测的亮度补偿值和亮度补偿标志的方 法和设备。

背景技术

随着视频技术的发展，模拟图像处理方法正在被数字图像处理方法取代。 结果，可以为用户提供比使用旧有技术拍摄的图像更清楚和具有更高图像质 量的图像。图像质量的改进已经为用户提供了更强烈的存在感。最近，正在 提供用于广播高质量图像的高清晰度(HD)电视(TV)业务，并且无论位置如何 都发送逼真和清楚的图像的数字多媒体广播(DMB)业务的商业化也正在准备 中。然而，仅改进图像本身的质量的高质量数字视频业务在改进用户得到的 自由度和存在感方面受限。在图像的使用中降低存在感的代表性因素包括： 具有固定视点的相机和缺乏深度的图像。固定的相机视点降低了自由度，这 是因为不允许用户在用户观看当前图像的同时观看除了当前图像之外的远 景。此外，由于人们在观看物体时，他们的眼睛从不同的位置朝向相同的方 向，因此，人们可通过两眼视差感受物体的深度。然而，由于不考虑双眼视 差，通过固定相机获取的图像不能给予深度的感觉。为了解决此问题，正在 开发通过位于多个视点的多个相机同时获取多视点图像的方法。

如上所述的对多视点图像编码的方案被称为多视点视频编码(MVC)方 案。MVC的意思是用于处理通过多个相机获取的多视点的图像的序列的方 案。根据MVC，多个相机位于离相同的物体不同距离和/或它们朝向相同的 物体。通过多个相机获取的多视点图像显示了来自相同物体的表面的光根据 它们的方向而不同的反射度，而视点的图像高度相关。多视点图像的此特性 导致相同物体的图像根据具体的视点而亮度和色彩不同。因此，为了改进多 视点视频编码的编码效率，应当考虑多视点图像的上述特性。

正在积极推动多视点视频编码的标准化，多视点视频编码正在寻求基于 H.264/MPEG-4部分10先进视频编码(H.264/AVC，是现有的用于视频编码的 国际标准)来考虑多视点图像的上述两个特性以改进编码效率的方法。例如， 分层式B-图像编码是一种用于支持H.264/AVC中定义的联合可分级视频编码 (JSVC)的时间可分级性的方法，分层式B-图像编码还应用于多视点视频编码 内的视点内预测编码。此外，在多视点视频编码执行的同时，视点间预测编 码也被并行执行，以提高编码效率。

图1示出预测结构的示例，该预测结构显示了多视点视频编码中的视点 内预测和视点间预测关系。在图1示出的示例中，存在八个视点，时间方向 的图像组(GOP)的大小为8。在图1中，S0、S1、S2、S3...S7的每一个指示 一个视点，T0、T1、T2、T3...T100指示时间方向。

参照图1，注意到在每个视点中通过使用H.264/AVC中定义的分层式B 图像编码执行时间方向上的预测编码。此外，在每个视点中，第一时间带T0 的图像和离第一时间带T0的图像每隔8帧(其为GOP的大小)的图像(位 于T8、T16、T24...)被称为“锚图像”。对于锚图像，仅执行从相邻视点的 预测(即，视点间预测)。例如，在时间带T0、T8、T16、T24....，从相同时 间带的S0视点对S2视点执行预测，从相同时间带的S0视点和S2视点对S1 视点执行预测，从相同时间带的S2视点对S4视点执行预测，从相同时间带 的S2视点和S4视点对S3视点执行预测，从相同时间带的S4视点对S6视 点执行预测，从相同时间带的S4视点和S6视点对S5视点执行预测，从相同 时间带的S6视点对S7视点执行预测。在S7视点的情况下，由于是最后的视 点，因此其预测从S6视点执行。

对于非锚图像，基本执行时间方向的预测，每隔两个视点(即，S1、S3、 S5和S7)额外执行从相邻视点的预测。也就是说，不仅执行时间方向的视点 内预测，还从S0视点和S2视点对S1视点执行视点间预测，从S2视点和S4 视点对S3执行视点间预测，从S4视点和S6视点对S5视点执行视点间预测。

多视点视频编码的国际标准目前正在进行中，多视点视频编码采用亮度 补偿方法以便通过补偿存在于时间方向的亮度信号之间的差或者视点之间的 差来提高编码效率。