[发明专利]一种双重注意力机制的舌裂纹提取方法

说明书

本发明提供了一种双重注意力机制的舌裂纹提取方法，用于对舌裂纹图像进行提取得到舌裂纹结果，其特征在于，包括如下步骤：调整舌裂纹图像的亮度以及对比度得到变换后图像；对舌裂纹图像以及变换后图像处理得到双重输入特征图；通过编码器从双重输入特征图中提取得到深层次特征图，解码器对深层次特征图还原得到高级别特征图；对舌裂纹图像进行卷积处理得到低级别特征图，利用双重注意力机制模块对高级别特征图以及低级别特征图进行信息融合得到像素级别的标签，从标签中得到舌裂纹结果。其中，双重输入特征图、深层次特征图以及高级别特征图均通过快速卷积模块进行快速特征提取得到。

技术领域

本发明属于图像分析领域，具体涉及一种双重注意力机制的舌裂纹提取方法。

背景技术

计算机辅助诊断(简称CAD)是指帮助医生解释医学图像的系统。CAD系统处理数字图像时会以突出显示某些部分(例如可能的疾病)，以此提供初步诊断结果，从而支持专业人员的决策。之前，CAD系统主要用于检测乳腺和胸部的节段性病变，使用时需要复杂的仪器和程序来获得输入图像。近年来，由于舌表面病理特征的可分析性和舌图像的易获取性，CAD系统在舌诊中的应用逐渐受到重视。因此，舌表面病理特征的自动提取具有重要意义，而提取得到舌表面病理特征是舌诊断CAD系统的基本组成部分。

舌裂纹是指舌表面不同深度和形状的裂纹以及深入到舌表面的肌肉层的裂纹。在大多数情况下，舌裂纹可以被视为舌体表面一种变化的曲线结构，其深度取决于舌粘膜萎缩和病变的严重程度。由于舌裂纹的一些量化指标反映了脏腑的健康状况，因此备受研究者的关注。Chen等人提出了一种基于Bot-hat变换和Otsu自适应阈值的舌裂纹提取方法。Xue等人利用Alexnet提取裂纹区域的深层特征，训练多实例支持向量机(SVM)进行最终决策从而得到目标检测结果。Chang等人利用ResNet50作为模型的主干，进而利用梯度加权类激活映射(Gradcam)对舌裂区进行识别和定位，并对舌裂区进行可视化。虽然上述方法能够取得一定的效果，但是仍存在如下问题：

1)舌裂纹边界模糊。在实际应用中，对一些小的区域进行分割是相当困难的，例如宽度小、深度不同的裂缝区域。更重要的是，与砖、路面和钢材表面不同，舌面并不光滑不平。舌片表面呈现复杂的蓬松结构，因此对舌片裂纹的边界判断造成很大干扰。此外，舌裂受舌表面丰富的病理细节的干扰，有些裂纹甚至逐渐变为普通纹理，这使得放大图像后难以区分某些像素是否属于舌裂区域。因此，在许多图像中，裂纹区域边界很难区分，一些困难的情况甚至给像素级标记带来了挑战。

2)舌裂纹图片具有多样性。舌裂纹图像的多样性可以大致分为两种。一种是舌裂纹形状的多样性，有些舌裂比较厚、深，但有的又浅又薄，占据了一个小面积(可能只有几个像素大小)，难以观察和分辨，难以让模型掌握它的形状特征。而另一种则是指非裂纹区域的多样性，如舌质和舌苔的颜色多样性。在某些极端情况下，舌裂的颜色与裂纹周围的舌苔颜色有着很高的相似性，难以辨别。此外，背景中的像素差异会带来很大的干扰，例如舌缘区域带来的干扰。总之，上述所有的方法都对分割模型的前景理解有一定的危害。

3)准确性和效率之间无法权衡。近年来，随着家庭智能医生的普及，在家用机器人和手机等移动电子设备上应用CAD系统的需求日益增长，这有助于为用户提供安全、方便、廉价的医疗服务。因此，实现舌裂的实时提取具有重要意义。然而，大多数高精度算法通常需要大量的内存和计算资源，移动电子设备有限的计算能力也限制了分割精度。此外，由于深度学习方法的解释性不足，使得神经网络结构中各参数的性能最大化是非常困难的。因此，提高计算精度，同时降低计算量是一个很大的挑战。

综上，目前还没有一种具有良好泛化性能的像素级的、精确的且实时性较高的舌裂纹提取方法。

发明内容

为解决上述问题，提供一种补全信息从而提高腺体分割边界解决腺体无法从背景中分别出来的问题的图像分割方法，本发明采用了如下技术方案：