[发明专利]处理影像超分辨率的装置及方法

说明书

本发明公开了一种处理影像超分辨率的装置及方法，该装置包含有：一产生器模块，用来接收至少一输入影像，并根据至少一第一参数及通过至少一第一通道关注所产生的第一复数个特征映射，产生一输出影像；一鉴别器模块，用来接收该输出影像及一高分辨率影像，以通过至少一第二通道关注，产生第二复数个特征映射及第三复数个特征映射，以及根据该第二复数个特征映射、该第三复数个特征映射及至少一第二参数，产生至少一分数；以及一反馈模块，用来接收该至少一分数，根据该至少一分数及一目标函数，更新该至少一第一参数及该至少一第二参数。

技术领域

本发明涉及用于多媒体系统的装置及方法，尤其是一种处理影像超分辨率的装置及方法。

背景技术

影像超分辨率旨在从低分辨率影像重建出高分辨率影像。在处理影像超分辨率时，本领域提出多种方法来最小化高分辨率影像及输出影像间的差异。然而，有些方法具有高峰值信噪比(high peak signal-to-noise ratio)效能，却具有低感知质量(lowperceptual quality)(例如输出影像过度平滑)。而一些方法具有高感知质量，却具有低峰值信噪比效能(例如输出影像具有结构失真)。因此，用来处理影像超分辨率且在峰值信噪比效能及感知质量间具有更好的权衡的方法仍是亟待解决的问题。

发明内容

本发明的主要目的即在于克服上述现有技术所存在的问题，提出一种处理影像超分辨率的装置及方法。

一种处理影像超分辨率的装置，包含：一产生器模块，用于接收至少一输入影像，并通过至少一第一通道关注，产生所述至少一输入影像的第一复数个特征映射；以及，根据所述第一复数个特征映射和所述产生器模块的至少一第一参数，产生一输出影像；一鉴别器模块，耦接于所述产生器模块，用于接收所述输出影像及一高分辨率影像，并通过至少一第二通道关注，产生所述输出影像的第二复数个特征映射及所述高分辨率影像的第三复数个特征映射；以及，根据所述第二复数个特征映射、所述第三复数个特征映射和所述鉴别器模块的至少一第二参数，产生至少一分数；以及，一反馈模块，耦接于所述产生器模块和所述鉴别器模块，用来接收所述至少一分数，并根据该至少一分数及一目标函数，更新所述至少一第一参数和所述至少一第二参数。

一种处理影像超分辨率的方法，用于前述装置，该方法包括如下步骤：

接收至少一输入影像；通过至少一第一通道关注，产生所述至少一输入影像的第一复数个特征映射；根据所述第一复数个特征映射和所述产生器模块的至少一第一参数，产生一输出影像；接收一高分辨率影像；通过至少一第二通道关注，产生所述输出影像的第二复数个特征映射及所述高分辨影像的第三复数个特征映射；根据所述第二复数个特征映射、所述第三复数个特征映射以及所述鉴别器模块的至少一第二参数，产生至少一分数；根据所述至少一分数及一目标函数，更新所述至少一第一参数和所述至少一第二参数。

附图说明

图1是本发明实施例一处理影像超分辨率的装置的原理框图；

图2是本发明实施例一产生器的原理框图；

图3是本发明实施例一鉴别器的原理框图；

图4是本发明实施例一通道关注的原理框图；

图5是本发明实施例一处理影像超分辨率的方法的流程图。

附图标记说明：

10:处理影像超分辨率的装置

100:产生器模块

110:鉴别器模块

120:反馈模块

20:产生器

200:部分产生器网络

210:恒等映射

220:最后卷积层

30:鉴别器

300,310,320:网络

330:至少一卷积层

40:通道关注