[发明专利]对残差积分图像的生成和编码

说明书

本发明涉及对由图像捕获设备捕获的至少一个当前积分图像(II_j)进行编码，所述编码包括由以下各项组成的步骤：‑根据与所述图像捕获设备相关联的至少一个图像捕获参数将所述当前积分图像分解(C1)成表示场景的给定视角的至少一个视帧(Vu)，‑对所述至少一个帧进行编码(C2)，‑对所述至少一个帧进行解码(C4)，‑通过应用对所述积分图像的所述分解的逆分解从所述至少一个解码帧中并且根据与所述图像捕获设备相关联的所述至少一个图像捕获参数重组(C5)所述当前积分图像，所述编码方法的特征在于，其实施由以下各项组成的步骤：‑通过将所述至少一个当前积分图像与所述重组积分图像进行比较来确定(C6)残差积分图像，‑对与所述残差积分图像相关联的数据以及与所述图像捕获设备相关联的所述至少一个图像捕获参数进行编码(C7)。

技术领域

本发明总体上涉及图像处理领域，并且更具体地涉及对积分图像以及积分图像序列的编码和解码。

本发明可以尤其但不排他地应用于当今AVC和HEVC视频编码器及其扩展(MVC、3D-AVC、MV-HEVC、3D-HEVC等)中所采用的视频编码，并且应用于相应视频解码。

背景技术

积分成像是包括突出表示图像的技术。尤其因为其提出了总视差而不是对图像的立体可视化，所以在发展3D电视方面，其被认为特别有前景。

积分图像常规地包括不同的基本图像，所述基本图像也被称为微图像，所述微图像中的每个微图像都表示三维场景中的不同视角。借助于包括视频相机和布置在三维场景和视频相机之间的透镜阵列的图像捕获设备来采集积分图像。

因此，对积分图像进行压缩相当于对构成所述积分图像的微图像中的所有微图像进行压缩。

不管这种技术的吸引力如何，都难以实际实施积分成像系统。例如，如果一些应用强加积分图像的高分辨率和大量视点，则有必要不仅增大构成该积分图像的每个微图像的大小而且增大其微图像的数量。这导致大大增大以此方式构造的积分图像的大小。因此，如果必须对积分图像进行编码，则存在要压缩的大量信息，并且就对积分图像的压缩而言，性能很差。

总体上提出了用于对积分图像进行压缩的两种不同编码方法。

第一种编码方法包括将二维(2D)编码应用于这种积分图像。为此，对常规2D编解码器的特性进行修改以便与积分图像的特定结构相匹配。根据第一示例，在文档“Compression of 3D Integral Images Using 3D Wavelet Transform(使用3D小波变换来压缩3D积分图像)”(Journal of Display Technologies(《显示技术杂志》)，2011年11月，Aggoun(阿布顿))和WO 2013156718A1中，提出了通过将离散小波变换DWT应用于积分图像来对积分图像进行编码，随后是对在该变换之后获得的系数进行编码。根据第二示例，在文档“New HEVC Prediction Modes for 3D Holoscopic Video Coding(用于3D全息成像器视频编码的新HEVC预测模式)”(ICIP 2012，2012年10月，Conti(康堤)、Nunes(努内斯)、Soares(索尔斯))中，提出了用于通过2D视频编码器的模式对积分图像进行编码的新预测模式。

以上种类的第一种方法的主要缺点在于积分图像的分辨率非常高，难以解码的事实。第一种方法必须对大量信息进行压缩，这导致很差的性能。