[发明专利]图像融合方法、装置、计算机可读存储介质和电子设备

说明书

本申请提供一种图像融合方法、装置、计算机可读存储介质和电子设备，涉及图像处理技术领域，能够对于双摄图像进行配准和优化，使得配准后的图像解析力提升，且配准后的图像中有效的降低图像的扭曲和变形问题。图像配准优化方法，包括：获取针对同一目标场景的第一图像和第二图像；根据第二图像，确定第一图像中的感兴趣区域；对第二图像与感兴趣区域进行配准，得到深度图像；根据深度图像的深度值以及位置权重，计算各像素点的优化深度值；根据优化深度图对第二图像进行重映射，优化深度图中各像素点的深度值为优化深度值；根据重映射后的第二图像和第一图像中的感兴趣区域进行融合，得到融合图像。

技术领域

本申请涉及图像处理技术领域，具体涉及一种图像融合方法、装置、计算机可读存储介质和电子设备。

背景技术

图像配准是指将不同时间、不同成像设备拍摄或同一成像设备在不同条件下获取的两幅或多幅图像进行匹配、叠加的过程，图像配准是图像叠加、人脸识别、身份验证、智慧城市等场景中必不可少的一环。

以两幅图像的配准为例，两幅图像通常拍摄的是同一场景，常见的对两幅图像进行配准的方法，是首先选取待配准图像中的一幅，提取该图像中的关键帧图像，获取另一待配准图像中各点与关键帧图像中各对应点之间的位置转换关系作为配准位置，进而根据配准位置，将另一待配准图像的各点匹配至关键帧图像中，以得到配准图像。

但是，由于两幅待配准图像通常为对于同一场景以两种不同的条件拍摄得到的，因此，两幅配准图像通过位置转换关系直接匹配叠加后，在关键帧图像和其他图像的连接处可能存在图像的扭曲、变形等问题，导致图像配准后的图像显示效果较差。

发明内容

本申请实施例的目的在于提供一种图像融合方法、装置、计算机可读存储介质和电子设备，能够对于双摄图像进行配准和优化，使得配准后的图像解析力提升，且配准后的图像中有效的降低图像的扭曲和变形问题。

本申请实施例的一方面，提供了一种图像融合方法，包括：获取针对同一目标场景的第一图像和第二图像，其中，第一图像的视场范围大于第二图像的视场范围；根据第二图像，确定第一图像中的与第二图像具有相同视场范围的感兴趣区域；对第二图像与感兴趣区域进行配准，得到深度图像；根据深度图像中各像素点的深度值，以及各像素点对应的位置权重，计算各像素点的优化深度值，其中，位置权重用于表征各像素点与深度图像的边缘的距离；根据优化深度图对第二图像进行重映射，优化深度图中各像素点的深度值为优化深度值；根据重映射后的第二图像和第一图像中的感兴趣区域进行融合，得到融合图像。

可选地，第一图像为广角图像，第二图像为长焦图像。

可选地，各像素点对应的位置权重由深度图像的中心向边缘逐渐降低。

可选地，根据优化深度图对第二图像进行重映射包括：根据优化深度图将第二图像配准到第一图像，得到重映射后的第二图像。

可选地，根据深度图像中各像素点的深度值，以及各像素点对应的位置权重，计算各像素点的优化深度值，包括：根据深度图像中各像素点的深度值，以及位置权重，对能量函数进行最小化处理，确定能量最小时像素点的深度值为优化深度值，其中，能量函数为关于像素点的深度值的方差的能量函数。

可选地，能量函数为：

depth_(x,y)为深度图像中像素坐标为(x，y)处的深度值，depth_opt(x,y)为像素坐标为(x，y)处的优化深度值，λ和γ为深度图像的权重量且λ和γ负相关，alpha为位置权重，Var(depth_opt(x,y))为像素坐标为(x，y)处的优化深度值的局部方差。

可选地，根据重映射后的第二图像和第一图像中的感兴趣区域进行融合，得到融合图像，包括：在第一图像中，采用重映射后的第二图像替换第一图像中的感兴趣区域，以得到融合图像。