[发明专利]图像处理方法及装置

说明书

本公开涉及图像处理方法及装置，所述方法包括：针对以预设参考图像为基础进行整体对齐后的多帧图像，以所述预设参考图像的每个参考图像块为基础得到每帧图像的多个图像块的图像块位移集合；对每帧图像的图像块位移集合进行上采样，得到上采样后的图像块位移集合；利用所述上采样后的图像块位移集合中的每个图像块位移对每个图像块进行图像块对齐，得到对齐后的多帧图像；将对齐后的多帧图像进行融合，得到融合图像；利用所述融合图像进行超分辨率重建，得到重建后的图像。本公开可以利用该多帧图像进行融合、对齐、超分辨率重建得到重建后的高分辨率、高信噪比图像，从而提高了图像处理的环境适应性及灵活性。

技术领域

本公开涉及图像处理领域，尤其涉及一种图像处理方法及装置。

背景技术

由于体积和成本的限制，移动终端（手机相机等）的拍摄能力往往比专业相机要低，具体表现在低分辨率和低信噪比上。得益于计算成像的快速发展，通过算法的方式提高成像质量成为了可能，并逐渐发展成一门科学——计算成像。然而，相关技术在对移动终端拍摄的图像进行图像处理以提高图像的分辨率、信噪比时，采用的图像处理模型较为复杂，且对拍摄的图像的要求较高（例如，一些相关技术要求拍摄的图像需要随机抖动）。

发明内容

有鉴于此，本公开提出了一种图像处理方法，所述方法包括：

针对以预设参考图像为基础进行整体对齐后的多帧图像，以所述预设参考图像的每个参考图像块为基础得到每帧图像的多个图像块的图像块位移集合，其中，每个图像块与每个参考图像块一一对应；对每帧图像的图像块位移集合进行上采样，得到上采样后的图像块位移集合；利用所述上采样后的图像块位移集合中的每个图像块位移对每个图像块进行图像块对齐，得到对齐后的多帧图像；

将对齐后的多帧图像进行融合，得到融合图像；

利用所述融合图像进行超分辨率重建，得到重建后的图像。

在一种可能的实施方式中，所述以预设参考图像的每个参考图像块为基础得到每帧图像的多个图像块的图像块位移集合，包括：

针对每帧图像的每个图像块，得到该帧图像的该图像块相对于对应的参考图像块的图像块位移。

在一种可能的实施方式中，所述方法还包括：

针对每帧图像的每个图像块，判断该帧图像的该图像块与所述预设参考图像的参考图像块是否存在错误对齐；

在存在错误对齐的情况下，利用该图像块的多个邻域图像块的位移更新该图像块的位移。

在一种可能的实施方式中，所述判断该帧图像的该图像块与所述预设参考图像的参考图像块是否存在错误对齐，包括：

在该图像块的图像块位移与所述多个邻域图像块的图像块位移均值的差异达到预设值、该图像块与对应的参考图像块不相似、且参考图像块为高频区域的情况下，判断该图像块与对应的参考图像块存在错误对齐；或

在该图像块的图像块位移与所述多个邻域图像块的图像块位移均值的差异达到预设值、该图像块与对应的参考图像块不相似、且参考图像块为低频区域的情况下，判断该图像块与对应的参考图像块存在错误对齐。

在一种可能的实施方式中，在得到融合图像后，所述方法还包括：

根据预设参考图像对所述融合图像进行导向滤波，得到导向滤波后的融合图像；

其中，所述利用所述融合图像进行超分辨率重建，包括：

利用所述导向滤波后的融合图像进行超分辨率重建。

在一种可能的实施方式中，所述利用所述融合图像进行超分辨率重建，包括：

确定待重建像素的邻域像素；