[发明专利]帧内色度预测方法、装置、设备及视频编解码系统

说明书

本申请实施例公开了一种帧内色度预测方法、装置、系统、终端设备、视频编码器、视频解码器及计算机可读存储介质，其中，方法包括：获取已编码或已解码重建的亮度分量；对已编码或已解码重建的亮度分量进行下采样；将预设参量输入至预训练的色度预测卷积神经网络模型中的图像上色子网络，得到图像上色子网络输出的色度分量；其中，预设参量包括下采样后的已编码或已解码重建的亮度分量，或者包括下采样后的已编码或已解码重建的亮度分量和目标参量，目标参量包括编码失真度和已编码或已解码重建的相邻色度块中的至少一种；根据色度分量得出色度预测结果。本申请实施例提供的基于卷积神经网络的帧内色度预测方案的普适性较高，可以节省码率。

技术领域

本申请属于视频编码技术领域，尤其涉及一种帧内色度预测方法、装置、视频编解码系统、终端设备、视频编码器、视频解码器及计算机可读存储介质。

背景技术

视频编码过程主要包括预测、变换量化以及熵编码等模块，预测有可以分为帧内预测和帧间预测，帧内预测又可以包括帧内色度预测和帧内亮度预测。

目前，在新一代视频编码标准多功能视频编码(Versatile Video Coding，VVC)中，为了消除YCbCr颜色空间中的冗余信息，一般是利用编码块中亮度分量和色度分量之间的线性相关性，采用相应的线性预测模型CCLM(Based Cross-component Linear ModelChroma Intra-prediction for Video Coding)或者多模型线性预测模型MMLM(Multi-model Based Cross-component Linear Model Chroma Intra-prediction for VideoCoding，MM-CCLM)进行帧内色度预测。但是，现有帧内色度预测方式无法适用于所有情况，需要耗费较多的码率。

发明内容

本申请实施例提供一种帧内色度预测方法、装置、视频编解码系统、终端设备、视频编码器、视频解码器及计算机可读存储介质，以解决现有帧内色度预测方式的普适性较低，且需要耗费较多码率的问题。

第一方面，本申请实施例提供一种帧内色度预测方法，包括：

获取已编码或已解码重建的亮度分量；

对所述已编码或已解码重建的亮度分量进行下采样；

将预设参量输入至预训练的色度预测卷积神经网络模型中的图像上色子网络，得到所述图像上色子网络输出的色度分量；其中，所述预设参量包括下采样后的已编码或已解码重建的亮度分量，或者包括下采样后的已编码或已解码重建的亮度分量和目标参量，所述目标参量包括编码失真度和已编码或已解码重建的相邻色度块中的至少一种；

从所述色度分量裁剪出目标色度分量块，所述目标色度分量块为最终的色度预测结果。

结合第一方面，在一种可能的实现方式中，当所述预设参量包括所述已编码或已解码重建的相邻色度块时，所述方法还包括：

从所述已编码或已解码重建的亮度分量中裁剪出目标亮度分量块；通过预设色度预测方式对所述目标亮度分量块进行色度预测，得到预测的色度；将所述预测的色度作为待预测色度块的初始色度分量。

结合第一方面，在一种可能的实现方式中，所述色度预测卷积神经网络模型还包括亮度下采样子网络；

所述对所述已编码或已解码重建的亮度分量进行下采样，包括：通过所述亮度下采样子网络，对所述已编码或已解码重建的亮度分量进行下采样。

结合第一方面，在一种可能的实现方式中，所述根据所述色度分量得出色度预测结果，包括：从所述色度分量中裁剪出目标色度分量块，所述目标色度分量块为所述已编码或已解码重建的亮度分量对应的色度预测结果。

第二方面，本申请实施例提供一种帧内色度预测方法，应用于视频编码器，所述方法包括：