[发明专利]图像处理方法及装置、电子设备和存储介质

说明书

本公开涉及一种图像处理方法及装置、电子设备和存储介质。所述方法包括：获取第一图像中目标对象的第一分割结果；获取第二图像中目标对象的第二分割结果；根据所述第一分割结果与所述第二分割结果，得到所述第一图像与所述第二图像之间的形变场，其中，所述形变场包括所述目标对象在所述第一图像与所述第二图像之间的每个像素点的位置变换关系。通过上述过程，可以使得第一图像与第二图像之间目标对象的信息融合可以具有更高的精度。

技术领域

本公开涉及图像处理技术领域，尤其涉及一种图像处理方法及装置、电子设备和存储介质。

背景技术

冠心病已经成为世界上死亡率最高的疾病之一，常见的治疗方案是经皮冠状动脉介入手术。经皮冠状动脉介入手术是在术中X光的引导下，利用导管扩张血管狭窄部分以到达治疗的目的。但是在手术过程中，心脏冠脉的X光图像内显示的血管会随着造影剂的消散变得不可见，这给医生带来了很大的挑战，手术的成功率也依赖医生的实际经验。

手术前拍摄的电子计算机断层扫描血管造影(CTA，CT Angiography)图像能很好地展现血管结构，但是由于不能术中实时拍摄，因此无法在手术过程中给予医生指导。如何利用手术前的CTA图像和手术过程中的X光图像，为手术过程提供更好的指导，成为目前一个亟待解决的问题。

发明内容

本公开提出了一种图像处理技术方案。

根据本公开的一方面，提供了一种图像处理方法，包括：

获取第一图像中目标对象的第一分割结果；获取第二图像中目标对象的第二分割结果；根据所述第一分割结果与所述第二分割结果，得到所述第一图像与所述第二图像之间的形变场，其中，所述形变场包括所述目标对象在所述第一图像与所述第二图像之间的每个像素点的位置变换关系。

通过上述过程，可以确定目标对象在第一图像与第二图像之间每个像素点的位置变换关系，利用该位置变换关系，可以将第一图像和第二图像之间目标对象的图像信息融合到同一坐标系，从而可以同时利用第一图像与第二图像包含的目标对象的图像信息，对目标对象后续需要执行的操作提供全面的指导；而且，由于该位置变换关系为目标对象每个像素点所对应的变换关系，因此，第一图像与第二图像之间目标对象的信息融合可以具有更高的精度。

在一种可能的实现方式中，所述根据所述第一分割结果与所述第二分割结果，得到所述第一图像与所述第二图像之间的形变场，包括：将所述第一分割结果与所述第二分割结果输入至第一神经网络，得到所述第一图像与所述第二图像的形变场。

通过上述过程，一方面可以利用神经网络，实现端到端的形变场预测，与逐像素点确定位置变换关系相比，可以大大缩短形变场的获取时间，提高形变场的获取效率，继而有效提升整个图像处理过程以及后续图像配准过程的效率；另一方面，通过神经网络获取的形变场，可以包含第一图像与第二图像之间每个像素点的位置变换关系，可以最大化形变场的自由度，提升了形变场的精度和准确率，从而提高整个图像处理过程以及后续进行图像配准过程的精度。

在一种可能的实现方式中，所述第一图像包括三维图像，所述第二图像包括二维图像；所述根据所述第一分割结果与所述第二分割结果，得到所述第一图像与所述第二图像之间的形变场，包括：根据所述第二图像的采集信息，将所述第一分割结果转换为二维的第三分割结果；将所述第三分割结果与所述第二分割结果输入至第一神经网络，得到所述第一图像与所述第二图像之间的形变场。

通过上述过程，可以利用二维的第二图像的采集信息，将第一图像的第一分割结果投影至二维平面，从而根据两个二维的分割结果来获取第一图像和第二图像之间的形变场，从而使得得到的形变场可以更加准确地反应出目标对象在第一图像与第二图像之间的变换关系，提升图像处理的精度和效果。

在一种可能的实现方式中，所述方法还包括：根据所述形变场，对所述第一图像与所述第二图像进行配准，得到配准结果。