[发明专利]多模态医学图像融合方法、装置及终端设备

说明书

本发明提出一种多模态医学图像融合方法、装置及终端设备，所述方法包括如下步骤：对原始医学图像进行优化重构，得到重构医学图像；将所述重构医学图像进行融合，得到预融合医学图像；选取细节丰富度最高的所述原始医学图像作为引导图像；基于所述预融合医学图像与所述引导图像进行细节循环引导融合。本发明通过对原始医学图像进行优化重构，得到重构医学图像，可以在保证重构医学图像的视觉保真度的前提下，降低原始医学图像中可能存在的噪声对融合性能带来的影响，通过基于所述预融合医学图像与所述引导图像进行细节循环引导融合，能够从原始医学图像中整合尽可能多的细节和纹理信息到最终的融合结果。

技术领域

本发明属于图像融合技术领域，尤其涉及一种多模态医学图像融合方法、装置及终端设备。

背景技术

目前，随着图像融合技术的发展，很多多模态图像融合方法相继被提出。现有的融合方法可以大致分为基于空域的融合方法和基于频域的融合方法。基于空域的融合方法直接对原始多模态医学图像进行融合，通过设计不同的融合规则达到一定的融合效果，包括简单的加权平均融合、基于主成分分析的融合方法与基于滤波算子的融合方法，此类方法会损失一些细节、纹理信息。基于频域的融合方法中，多采用一些变换算法将原始图像变换到多尺度变换空间中，针对不同的分量设计不同的融合规则，此类方法具有较高的时间复杂度，且分解参数的设置直接影响融合性能。

现有的大部分融合方法，并未考虑到医学影像在成像过程中容易受到磁场、外部环境的干扰，从而造成多模态的医学图像包含噪声信息。且多数融合方法无法充分保留原始多模图像中的细节信息，而原始多模医学影像中的细节、纹理信息恰恰是医学诊疗过程中不可或缺的重要信息。

因此，传统的技术方案中存在多模态的医学图像包含噪声信息，且无法充分保留原始多模图像中的细节信息的问题。

发明内容

本发明的目的在于提供一种多模态医学图像融合方法、装置及终端设备，旨在解决传统的技术方案存在多模态的医学图像包含噪声信息，且无法充分保留原始多模图像中的细节信息的问题。

本发明实施例的第一方面提供了一种多模态医学图像融合方法，所述方法包括如下步骤：

对原始医学图像进行优化重构，得到重构医学图像；

将所述重构医学图像进行融合，得到预融合医学图像；

选取细节丰富度最高的所述原始医学图像作为引导图像；

基于所述预融合医学图像与所述引导图像进行细节循环引导融合。

通过对原始医学图像进行优化重构，得到重构医学图像，可以在保证重构医学图像的视觉保真度的前提下，降低原始医学图像中可能存在的噪声对融合性能带来的影响，通过基于所述预融合医学图像与所述引导图像进行细节循环引导融合，能够从原始医学图像中整合尽可能多的细节和纹理信息到最终的融合结果。

在一个实施例中，所述对原始医学图像进行优化重构，得到重构医学图像包括如下步骤：

对所述原始医学图像进行奇异值分解；

选取最优重构秩对所述原始医学图像进行优化重构，得到所述重构医学图像。

通过对原始医学图像进行优化重构，得到重构医学图像，可以在保证重构医学图像的视觉保真度的前提下，降低原始医学图像中可能存在的噪声对融合性能带来的影响。

在一个实施例中，所述选取最优重构秩对所述原始医学图像进行优化重构，得到所述重构医学图像包括如下步骤：

基于所述原始医学图像在重构秩下的重构结果构建视觉保真损失函数；

通过所述视觉保真损失函数求取最优重构秩；

通过所述最优重构秩对所述原始医学图像进行优化重构，得到所述重构医学图像。