[发明专利]用于对图像执行人工智能编码和人工智能解码的设备和方法

说明书

一种人工智能(AI)解码设备，包括：存储器，存储一个或更多个指令；以及处理器，被配置为执行所存储的一个或更多个指令，以进行以下操作：获得与被编码的第一图像对应的图像数据，通过对所获得的图像数据进行解码来获得与第一图像对应的第二图像，确定是否执行对所获得的第二图像的AI放大，基于确定执行对所获得的第二图像的AI放大，通过经由放大深度神经网络(DNN)执行对所获得的第二图像的AI放大来获得第三图像，并输出所获得的第三图像，并且基于确定不执行对所获得的第二图像的AI放大，输出所获得的第二图像。

技术领域

本公开涉及对图像进行编码和解码。更具体地，本公开涉及用于基于人工智能(AI)对图像进行编码和解码的设备和方法。

背景技术

图像在经由遵循数据压缩标准(诸如运动图像专家组(MPEG)标准)的编解码器而被编码之后以比特流的形式被存储在记录介质中或者经由通信信道被发送。

随着能够再现和存储高分辨率和高质量图像的硬件的发展和供应，对能够有效地对这样的高分辨率和高质量图像进行编码和解码的编解码器的需求增加。

发明内容

技术方案

根据实施例，一种人工智能(AI)解码设备包括：存储器，存储一个或更多个指令；以及处理器，被配置为执行所存储的一个或更多个指令，以进行以下操作：获得与被编码的第一图像对应的图像数据，通过对所获得的图像数据进行解码来获得与第一图像对应的第二图像，确定是否执行所获得的第二图像的AI放大，基于确定执行所获得的第二图像的AI放大，通过经由放大深度神经网络(DNN)执行所获得的第二图像的AI放大来获得第三图像，并输出所获得的第三图像，并且基于确定不执行所获得的第二图像的AI放大，输出所获得的第二图像。

有益效果

提供了用于对图像执行人工智能(AI)编码和AI解码的设备和方法，其中，基于AI对图像进行编码和解码以实现低比特率。

另外的方面将部分地在下面的描述中被阐述，并且部分地将从描述中显而易见，或者可通过本公开的所提供的实施例的实践而被获知。

附图说明

从结合附图的以下描述，本公开的实施例的以上和其他方面、特征和优点将更加显而易见，其中：

图1a是用于描述根据实施例的人工智能(AI)编码处理和AI解码处理的示图；

图1b是用于描述根据本公开的实施例的AI编码处理和一般解码处理的示图；

图1c是用于描述根据本公开的实施例的一般编码处理和AI解码处理的示图；

图2是根据本公开的实施例的AI解码设备的配置的框图；

图3是示出用于对第二图像执行AI放大的第二深度神经网络(DNN)的示图；

图4是用于描述由卷积层执行的卷积运算的示图；

图5是示出若干条图像相关信息与若干条DNN设置信息之间的映射关系的表；

图6是示出包括多个帧的第二图像的示图；

图7是用于描述根据本公开的实施例的用于对第二图像执行AI放大的第二DNN的结构的示图；

图8是用于描述用于对与第一放大目标对应的第二图像执行AI放大的第二DNN的结构的示图；

图9是用于描述用于对与第二放大目标对应的第二图像执行AI放大的第二DNN的结构的示图；

图10是用于描述用于对与第三放大目标对应的第二图像执行AI放大的第二DNN的结构的示图；

图11是用于描述用于对与第四放大目标对应的第二图像执行AI放大的第二DNN的结构的示图；