[发明专利]图像处理方法及装置、计算机可读存储介质和电子设备

说明书

本公开提供了一种图像处理方法、图像处理装置、计算机可读存储介质和电子设备，涉及图像处理技术领域。该图像处理方法包括：获取待处理图像，对待处理图像执行第一卷积处理过程，得到多个图像块；其中，每个图像块均包含待处理图像的全局信息；对各图像块执行第二卷积处理过程，得到与各图像块对应的频域特征；对各频域特征执行第三卷积处理过程，得到与各图像块对应的第一空域特征；对各图像块执行第四卷积处理过程，得到与各图像块对应的第二空域特征；利用第一空域特征和第二空域特征生成与待处理图像对应的处理后的图像。本公开可以增强图像的质量。

技术领域

本公开涉及图像处理技术领域，具体而言，涉及一种图像处理方法、图像处理装置、计算机可读存储介质和电子设备。

背景技术

超分辨率重建(Super Resolution，SR)是一种通过硬件或软件的方式来提升图像或视频分辨率的技术，其在图像处理技术领域中具有较高的研究价值且应用广泛。

目前，在利用超分辨率重建的方案中，图像的高低频信息较难区分，可能出现图像处理效果差的问题，这限制了的超分辨率重建技术的发展。

发明内容

本公开提供一种图像处理方法、图像处理装置、计算机可读存储介质和电子设备，进而至少在一定程度上克服由于图像的高低频信息较难区分而导致图像处理效果差的问题。

根据本公开的第一方面，提供了一种图像处理方法，包括：获取待处理图像，对待处理图像执行第一卷积处理过程，得到多个图像块；其中，每个图像块均包含待处理图像的全局信息；对各图像块执行第二卷积处理过程，得到与各图像块对应的频域特征；对各频域特征执行第三卷积处理过程，得到与各图像块对应的第一空域特征；对各图像块执行第四卷积处理过程，得到与各图像块对应的第二空域特征；利用第一空域特征和第二空域特征生成与待处理图像对应的处理后的图像。

根据本公开的第二方面，提供了一种图像处理装置，包括：图像块生成模块，用于获取待处理图像，对待处理图像执行第一卷积处理过程，得到多个图像块；其中，每个图像块均包含待处理图像的全局信息；频域特征提取模块，用于对各图像块执行第二卷积处理过程，得到与各图像块对应的频域特征；空域特征转换模块，用于对各频域特征执行第三卷积处理过程，得到与各图像块对应的第一空域特征；空域特征提取模块，用于对各图像块执行第四卷积处理过程，得到与各图像块对应的第二空域特征；图像生成模块，用于利用第一空域特征和第二空域特征生成与待处理图像对应的处理后的图像。

根据本公开的第三方面，提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述的图像处理方法。

根据本公开的第四方面，提供了一种电子设备，包括处理器；存储器，用于存储一个或多个程序，当一个或多个程序被处理器执行时，使得所述处理器实现上述的图像处理方法。

在本公开的一些实施例所提供的技术方案中，利用神经网络的卷积过程对待处理图像进行空域和频域的处理，并将结果融合，生成处理后的图像。一方面，通过空域的处理过程以及频域的处理过程，可以较好的实现图像的分析，区分高低频信息，得到质量增强的图像，显著提升超分辨率重建技术的表现性能；另一方面，本方案整体架构基于神经网络来实现，学习能力强，能应用于各种复杂的图像处理场景；再一方面，本方案首先利用卷积过程得到包含全局信息的图像块，再对图像块进行处理，由此，可以降低网络的带宽和复杂度，使处理过程更加优化；又一方面，本公开的方案不仅可以应用于提升分辨率的场景，还可以应用于去噪、去模糊、修复画面等各种图像处理领域。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：