[发明专利]一种基于联合字典的彩色与深度图像后处理方法

说明书

技术领域

本发明涉及一种视频信号的处理方法，尤其是涉及一种基于联合字典的彩色与深度图像后处理方法。

背景技术

随着通信技术和视频技术的不断成熟，高质量的视觉体验成为发展的主流，而3D视频能够提供深度信息，满足人们对立体感和真实感的视觉需求。但是3D视频的数据量非常庞大，需要进行编码以适应传输或存储的要求。近年来，基于块的离散余弦变换已经广泛的应用于图像和视频压缩之中，如：JPEG、MPEG、H.264/AVC等，然而，视频经过编码后会产生块效应，并严重影响观看和绘制效果，因此有效的滤波后处理技术已成为研究的热点。

现有的视频编码标准采用环路处理方法将去除块效应操作嵌入到编码框架中，这样能有效地避免块效应在帧间的传播；或者通过采用滤波方法对解码视频图像进行后处理，但这类方法更多的是考虑如何提升编码，而经过压缩后的彩色与深度图像，结构信息会发生严重的退化，而彩色与深度图像本身存在较强的结构关联度，因此，如何构造能反映彩色与深度图像本质特征的联合字典，如何根据联合字典来对彩色与深度图像进行后处理操作，都是在对彩色与深度图像后处理研究中需要重点解决的技术问题。

发明内容

本发明所要解决的技术问题是提供一种基于联合字典的彩色与深度图像后处理方法，其能够充分地恢复出彩色与深度图像的结构信息，能够有效地提高虚拟视点图像的绘制性能。

本发明解决上述技术问题所采用的技术方案为：一种基于联合字典的彩色与深度图像后处理方法，其特征在于包括训练阶段和测试阶段两个过程，所述的训练阶段过程的具体步骤如下：

①-1、选取N幅宽度为W且高度为H的原始的无失真彩色图像及对应的深度图像，将由N幅原始的无失真彩色图像构成的彩色图像集合记为{I_i,org|1≤i≤N}，将由N幅原始的无失真彩色图像对应的深度图像构成的深度图像集合记为{D_i,org|1≤i≤N}，其中，N≥1，I_i,org表示{I_i,org|1≤i≤N}中的第i幅彩色图像，D_i,org表示{D_i,org|1≤i≤N}中的第i幅深度图像，I_i,org与D_i,org对应；

①-2、将{I_i,org|1≤i≤N}中的每幅彩色图像划分成个互不重叠的尺寸大小为8×8的子块；然后采用K-SVD方法对{I_i,org|1≤i≤N}中的所有彩色图像中的子块构成的集合进行字典训练操作，构造得到{I_i,org|1≤i≤N}的彩色字典表，记为D_c，其中，D_c的维数为64×K，K表示设定的字典的个数，K≥1；

同样，将{D_i,org|1≤i≤N}中的每幅深度图像划分成个互不重叠的尺寸大小为8×8的子块；然后采用K-SVD方法对{D_i,org|1≤i≤N}中的所有深度图像中的子块构成的集合进行字典训练操作，构造得到{D_i,org|1≤i≤N}的深度字典表，记为D_d，其中，D_d的维数为64×K；

所述的测试阶段过程的具体步骤如下：

②-1、对于任意一幅宽度为W'且高度为H'的经JPEG编码失真的彩色图像I_test及对应的经JPEG编码失真的深度图像D_test；