[发明专利]图像处理方法及其相关设备

说明书

本申请提供了一种图像处理方法及其相关设备，涉及图像处理领域，该图像处理方法包括：第一摄像头采集第一图像和第二摄像头采集第二图像；根据所述第一图像得到掩膜块；将第一图像和第二图像进行融合，得到第一融合图像；根据掩膜块，确定第一图像中的第一图像块和确定第二图像中的第二图像块；将第一图像块和第二图像块进行融合，得到融合图像块；将第一融合图像与融合图像块进行融合，得到第三图像。本申请通过利用较清晰的第二图像中的内容，与低清晰的第一图像中的相同区域进行融合，以恢复缺失的细节，然后进行多次融合，得到高清晰度的图像。

技术领域

本申请涉及图像处理领域，尤其涉及一种图像处理方法及其相关设备。

背景技术

随着电子设备的广泛使用，使用电子设备进行拍照已经成为人们生活中的一种日常行为方式。以电子设备为手机为例，随之出现了各种多帧图像合成算法以提升图像质量的技术，例如：多帧降噪、多帧超分辨率等。

但是，在一些高动态范围(high dynamic range，HDR)场景中或者逆光场景中，由于待拍摄场景中的物体表面的部分区域产生了高光反射，导致这些高亮度区域细节丢失，相关技术却无法有效处理这种情况。因此，如何对图像的高亮度区域中的细节进行复原成为一个亟需解决的问题。

发明内容

本申请提供一种图像处理方法及其相关设备，能够对图像中的低清晰度区域进行图像复原处理，恢复细节，从而提高用户体验。

为达到上述目的，本申请采用如下技术方案：

第一方面，提供一种图像处理方法，应用于包括第一摄像头和第二摄像头的电子设备，该方法包括：

电子设备启动相机；显示预览界面，预览界面包括第一控件；检测到对第一控件的第一操作；响应于第一操作，第一摄像头采集第一图像和第二摄像头采集第二图像，第一图像的清晰度低于第二图像的清晰度，第一图像包括第一区域，第一区域为第一图像中清晰度小于预设阈值的区域；根据第一图像得到掩膜块，掩膜块与第一区域对应；将第一图像和第二图像进行融合，得到第一融合图像；根据掩膜块，确定第一图像中的第一图像块和确定第二图像中的第二图像块，第一图像块与掩膜块对应，第二图像块与掩膜块对应；将第一图像块和第二图像块进行融合，得到融合图像块；将第一融合图像与融合图像块进行融合，得到第三图像。

示例性的，第一控件可以为拍摄键11。

本申请实施例提供了一种图像处理方法，通过从低清晰度的第一图像中确定出缺失细节的第一区域所对应的掩膜块，然后从第一图像中获取掩膜块对应的第一图像块，以及从高清晰度、包含丰富细节的第二图像中获取掩膜块对应的第二图像块，并将第一图像块和第二图像块进行融合，得到清晰的融合图像块；再将第一图像、第二图像融合成的第一融合图像与融合图像块进一步进行融合，以修复缺失的细节，得到高清晰度的第三图像。

在第一方面一种可能的实现方式中，根据第一图像得到掩膜块，包括：将第一图像输入分割模型进行分割，并生成掩膜块；分割模型用于对第一图像中的第一区域进行分割，并生成与第一区域对应的掩膜块。

示例性的，分割模型可以为：全卷积神经网络。

在该实现方式中，通过分割模型可以对第一图像进行精细化分割，得到分割后的多个图像区域，从而便于后续对第一图像中局部缺失细节严重的区域独立进行修复，而不影第一区域周边的图像。

在第一方面一种可能的实现方式中，将第一图像和第二图像进行融合，得到第一融合图像，包括：将第一图像和第二图像利用第一融合模型进行融合，得到第一融合图像。

在该实现方式中，由于第二图像相对于第一图像清晰度高，由此，将第一图像和第二图像融合后，可以提高图像整体的清晰度，得到较高清晰度的第一融合图像。