[发明专利]AI编码装置及其操作方法和AI解码装置及其操作方法

说明书

一种人工智能(AI)编码装置，包括：至少一个处理器，该至少一个处理器被配置为：基于第一图像的目标分辨率确定降尺度目标，通过使用与降尺度目标相对应的AI降尺度神经网络对原始图像进行AI降尺度获得第一图像，通过对第一图像进行编码生成图像数据，基于第一图像的目标分辨率、原始图像的特性信息和目标细节强度选择AI升尺度神经网络设置标识信息，生成包括第一图像的目标分辨率、第一图像的比特深度信息、AI升尺度神经网络设置标识信息和编码控制信息的AI数据，并且生成包括图像数据和AI数据的AI编码数据；以及通信接口，该通信接口被配置为将AI编码数据发送到AI解码装置，其中，该AI数据包括关于与AI降尺度神经网络相对应的AI升尺度神经网络的信息。

技术领域

本公开涉及人工智能(AI)编码装置、AI编码装置的操作方法、AI解码装置和AI解码装置的操作方法。更具体地，本公开涉及一种能够对原始图像进行AI降尺度(AI-downscaling)和编码并将AI降尺度和编码的结果发送到AI解码装置的AI编码装置、该AI编码装置的操作方法、能够对从AI编码装置接收到的图像进行解码和AI升尺度(AI-upscaling)的AI解码装置以及该AI解码装置的操作方法。

背景技术

图像可以通过使用遵循指定数据压缩标准(例如，运动图像专家组(movingpicture expert group，MPEG)压缩标准)的编解码器来编码，然后可以被存储在记录介质中、或者使用通信信道以比特流的形式来传输。

随着对用于再现(reproduce)和存储高分辨率/高质量图像的硬件的开发和供应，对能够有效编码和解码高分辨率/高质量图像的编解码器的需求增加。

发明内容

技术问题

提供了一种能够对图像进行AI降尺度并将AI升尺度所需的AI数据和经编码的图像数据发送到AI解码装置的AI编码装置，以及该AI编码装置的操作方法。

此外，提供了一种能够从AI编码装置接收图像数据和AI数据、对图像数据进行解码并通过使用与AI数据相对应的升尺度神经网络模型对解码后的图像进行AI升尺度的AI解码装置，以及该AI解码装置的操作方法。

问题的技术解决方案

根据本公开的一个方面，一种人工智能(AI)编码装置，包括：至少一个处理器，该至少一个处理器被配置为：基于第一图像的目标分辨率确定降尺度目标，通过使用与降尺度目标相对应的AI降尺度神经网络对原始图像进行AI降尺度获得第一图像，通过对第一图像进行编码生成图像数据，基于第一图像的目标分辨率、原始图像的特性信息和目标细节强度选择AI升尺度神经网络设置标识信息，生成包括第一图像的目标分辨率、第一图像的比特深度信息、AI升尺度神经网络设置标识信息和编码控制信息的AI数据，并且生成包括图像数据和AI数据的AI编码数据；以及通信接口，该通信接口被配置为将AI编码数据发送到AI解码装置，其中，该AI数据包括关于与AI降尺度神经网络相对应的AI升尺度神经网络的信息。

该至少一个处理器还可以被配置为通过使用质量测量网络确定原始图像的质量信息，并且根据原始图像的质量信息确定目标细节强度。

该质量信息指示高质量、低质量或噪声质量中的至少一个，并且该质量测量网络可以被配置为提取表示原始图像的细节、噪声或对比度中的至少一个的特征，并且基于提取出的特征确定质量信息。

该AI数据还可以包括解码控制信息，该解码控制信息包括AI升尺度神经网络的更新方法和AI升尺度比率。

该编码控制信息可以包括量化级别或画面类型中的至少一个，该量化级别可以被确定为预设的第一值，并且该画面类型可以被确定为帧内(I)画面、预测(P)画面或双向(B)画面。

该AI编码数据还可以包括元数据盒和媒体数据盒，该AI数据可以被包括在元数据盒中，并且该图像数据可以被包括在媒体数据盒中。