[发明专利]环路滤波装置和图像解码装置

权利要求书

1.一种环路滤波装置，其特征在于，所述环路滤波装置包括：

下采样单元，其对输入的重构图像帧进行下采样，得到N个通道的特征图；

残差学习单元，其对输入的N个通道的特征图进行残差学习，得到N个通道的特征图；以及

上采样单元，其对输入的N个通道的特征图进行上采样，得到所述重构图像的原始尺寸图像。

2.根据权利要求1所述的环路滤波装置，其特征在于，所述下采样单元通过第一卷积层对输入的重构图像帧进行下采样，得到N个通道的特征图。

3.根据权利要求1所述的环路滤波装置，其特征在于，所述残差学习单元通过多个残差块分别对输入的N个通道的特征图进行残差学习。

4.根据权利要求3所述的环路滤波装置，其特征在于，每个残差块包括：

第二卷积层，其对输入的N个通道的特征图进行升维处理，得到M个通道的特征图，M大于N；

第三卷积层，其对来自所述第二卷积层的M个通道特征图进行降维处理，得到N个通道的特征图；以及

第四卷积层，其对来自所述第三卷积层的N个通道的特征图进行特征提取，得到N个通道的特征图。

5.根据权利要求4所述的环路滤波装置，其特征在于，所述第四卷积层为深度可分离卷积层。

6.根据权利要求1所述的环路滤波装置，其特征在于，所述上采样单元通过第五卷积层和整合层对输入的N个通道的特征图进行上采样；

所述第五卷积层对输入的N个通道的特征图进行压缩，得到N个通道的特征图；

所述整合层将来自所述第五卷积层的N个通道的特征图进行整合，合并为一个图像作为所述重构图像的原始尺寸图像。

7.根据权利要求1所述的环路滤波装置，其特征在于，所述环路滤波装置还包括：

第一计算单元，其将输入的重构图像帧除以量化步长，将计算结果作为所述下采样单元的输入；以及

第二计算单元，其对所述上采样单元输出的原始尺寸图像乘以所述量化步长，将计算结果作为所述原始尺寸图像输出。

8.根据权利要求1所述的环路滤波装置，其特征在于，所述重构图像帧为帧内帧。

9.一种图像解码装置，其特征在于，所述图像解码装置包括：

处理单元，其对接收到的码流进行去变换和去量化处理；

CNN滤波单元，其对所述处理单元的输出进行第一次滤波处理；

SAO滤波单元，其对所述CNN滤波单元的输出进行第二次滤波处理；

ALF滤波单元，其对所述SAO滤波单元的输出进行第三次滤波处理，将滤波处理后的图像作为重构图像输出；

其中，所述CNN滤波单元包括权利要求1-8任一项所述的环路滤波装置。

10.根据权利要求9所述的图像解码装置，其特征在于，所述图像解码装置还包括：

第一预测单元，其对所述处理单元的输出进行帧内预测；

第二预测单元，其根据运动估计结果和参考帧对所述ALF滤波单元的输出进行帧间预测；

运动估计单元，其根据输入的视频帧以及所述参考帧进行运动估计，得到运动估计结果提供给所述第二预测单元。