[发明专利]一种基于相邻切片推理的脑肿瘤弱监督分割方法及系统

说明书

本发明提出一种基于相邻切片推理的脑肿瘤弱监督分割方法与系统，包括：对MRI多模态脑肿瘤图像进行预处理，得到多模态切片图像及对应的图像级标签；将多模态切片图像及其相邻的切片图像送入到切片特征提取模块中进行特征提取，分别获得特征图；将得到的特征图送入到相邻切片推理模块进行切片间信息的推理，获得切片关系矩阵；将多模态切片图像的特征图与切片关系矩阵送入全局加权平均池化模块，得到具有代表性的特征值；将特征值送入损失计算模块，并训练特征提取器E和全连接层A；将需要分割的MRI多模态脑肿瘤切片图像送入到训练好的特征提取器中进行特征提取，得到特征图；将得到的特征图送入到训练好的全连接层中进行直接计算，得到类激活映射图；将得到的类激活映射图进行二值化处理，得到最终的弱监督分割结果。

技术领域

本发明涉及计算机视觉和医学图像分割领域，特别是涉及一种基于相邻切片推理的脑肿瘤弱监督分割方法及系统。

背景技术

脑肿瘤具有侵袭性生长特性，由于生长部位在大脑，其解剖关系及功能都具有特殊性，大部分胶质瘤难以大范围的彻底切除，残留的肿瘤细胞成为日后复发的根源，因此脑肿瘤具有高致残率、高复发率的特征，严重影响患者的生存周期及生活质量。MRI核磁共振图像可以很好的帮助医生观察患者脑肿瘤的生长状况，帮助医生实现对脑肿瘤的观测和诊断。然而，如果医生使用单纯的人工读图的方式对MRI脑肿瘤进行识别，需要其本身经过专业的训练，具有较高的资历，否则很容易出现误诊的情况。同时，人工读图效率低下，很难适应当下的医疗环境。图像分割技术是利用计算机实现对目标物的分割，利用图像分割技术可以快速的将脑肿瘤从正常组织中分割出来，实现肿瘤组织的可视化。利用图像分割技术可以极大的提高脑肿瘤的诊断准确率，提高诊断效率，分割结果还可以为后期手术提供量化的数据支持。

然而，使用传统的全监督训练方法，利用卷积神经网络进行图像分割时，需要在网络训练前对训练集数据进行像素级标注，这些需要专业的医师通过手工标注的方式完成。这一方式会消耗大量的人力物力，提高训练的成本和时间。

弱监督语义分割是图像分割技术之一，目前弱监督技术主要包括不完整的监督、不精确的监督以及不准确的监督。对于不精确的监督，其主要是指在只给定粗粒度标签的情况下，训练更精细的任务。对于弱监督图像分割来说，就是在训练过程中不再使用像素级标签，而是使用涂鸦标签、包围盒标签或图像级标签等进行训练。相比于全监督分割，弱监督分割技术训练代价更低，能够很好的弥补医学图像训练中无法满足大量像素级标签的劣势。图像级标签是指相较于像素级标签需要指定图像中每个像素点的分类，其只需要指定该图像中包含哪些类。目前，针对图像级标签的训练方法主要是以类激活映射图作为基石，通过全局平均池化层填补分割网络与分类网络之间的鸿沟，通过分类标签对网络进行训练，促使卷积网络学习分类标签所指目标的位置和形状。

然而类激活映射图相比于所需分割的真实标签来说，性能并不理想，对类激活映射图进行改进，成为目前主流的图像级标签弱监督分割领域的主流研究方向。针对MRI脑肿瘤图像来说，类激活映射图存在覆盖范围过大、肿瘤形状不清晰等问题，只能简单的对肿瘤进行定位而不能准确的将肿瘤分割出来。因此，针对MRI脑肿瘤图像进行弱监督分割的研究，具有很大的研究空间和价值。

发明内容

针对现有技术存在的问题，本发明提出了一种基于相邻切片推理的脑肿瘤弱监督分割方法，利用切片间的关联信息进行网络训练，提高弱监督技术中类激活映射的性能，在仅使用图像级标注的情况下，进一步提高图像的分割质量。

为实现上述目的，本公开采用如下技术方案：

一种基于相邻切片推理的脑肿瘤弱监督分割方法，包括以下步骤：

步骤1，对MRI多模态脑肿瘤图像进行预处理，得到MRI多模态脑肿瘤切片图像及对应的图像级标签Y；

步骤2，将MRI多模态脑肿瘤切片图像i及其相邻的多模态脑肿瘤切片图像i-1和i+1送入到切片特征提取模块，使用特征提取器E进行特征的提取，分别获得特征图、和；