[发明专利]基于结构-功能脑网络的精神疾病识别方法

说明书

本发明提供了基于结构‑功能脑网络的精神疾病识别方法，属于医学信息智能诊断技术领域，解决了利用人工智能帮助医生从海量数据中识别精神疾病的技术问题。其技术方案为：对结构和功能两类脑网络的连接矩阵分别进行行列卷积，获得深度特征；在特征学习过程中，增加深度融合模块，使两个模态可以交互式特征学习；在最终的识别阶段，通过多模态双线性池化层，进一步融合两类脑网络的特征，学习最后的联合特征；然后输入到最终的分类层获得疾病识别结果，并将预测标签和真实标签的交叉熵损失作为损失函数进行训练。本发明的有益效果为：显著提高对精神疾病识别的准确率，辅助医生进行诊断分析，给患者带来更好的医疗服务。

技术领域

本发明涉及医学信息智能诊断技术领域，尤其涉及基于结构-功能脑网络的精神疾病识别方法。

背景技术

在医学上，精神疾病会造成思想、感觉、情绪和行为的改变，进而导致患者无法正常工作和学习，严重影响其社会功能，进而增加患者家庭以及社会的负担。精神疾病在我国相当普遍，中国疾控中心在2019年发布的报告中指出我国七分之一的居民在一生中发生过至少一种精神障碍疾病。

目前常见的多模态脑网络融合方式有决策层融合和前期融合两种。常见的决策融合方式有拼接融合、多核融合和多视图融合，然而，决策层融合在处理多模态脑网络数据时，有其天然的缺陷，即仅使用了结构脑网络和功能脑网络的互补信息，而忽略了结构脑网络和功能脑网络之间的关联信息。前期融合主要可分为两类，其一，融合结构和功能两种模态的信息构建脑网络，常见的有根据功能脑网络辅助结构脑网络中白质纤维的追踪,或者在构建功能脑网络时考虑结构脑网络信息，从而增加空间约束；其二，是通过建立一个统一的模型联合使用结构和功能脑网络。相比决策层融合方法，前期融合同时使用了结构脑网络和功能脑网络的互补信息和关联信息，可以一定程度地提高疾病的识别准确率。

脑网络可以根据构建时所用的影像数据类别分为结构脑网络和功能脑网络两类。其中结构脑网络多使用弥散张量数据构建，其连接信息主要反映脑区之间的白质纤维连接，功能脑网络多使用功能磁共振成像数据构建，其连接信息主要反映脑区之间的活动一致性。这两类脑网络可以从不同视角反映精神疾病引起的脑部异常，其既有特异性又有互补性。目前已有的多模态融合方法并未充分利用两类脑网络的互补性和特异性，特别是没有在特征学习过程中考虑结构和功能之间复杂的联系。

因此，联合使用结构脑网络和功能网络，开展多模态脑网络特征融合研究，可以辅助医生诊断精神疾病，从而提高疾病诊断的准确率。

发明内容

本发明的目的在于提供一种基于结构-功能脑网络的精神疾病识别方法，提高精神疾病识别准确率。

为了更好地实现上述发明目的，本发明通过以下的技术方案实现：基于结构-功能脑网络的精神疾病识别方法，具体步骤如下：

A、结构-功能特征深度融合中对于功能脑网络和结构脑网络特征的提取，令A^F∈R^N×N为功能脑网络的连接矩阵，A^S∈R^N×N为结构脑网络的连接矩阵(N为脑网络节点的个数)，为从连接矩阵中获取脑网络的深度特征，使用由Kawahara等人提出的边到边卷积(E2E)，边到节点卷积(E2N)，节点到图卷积(N2G)获取每一步的特征图。分别记结构脑网络和功能脑网络经过E2E卷积后的特征为S^E∈R^N×N×C1′，F^E∈R^N×N×C1，其中C1和C1′为特征的通道数；

B、在特征学习过程中，添加深度融合模块，用以在特征学习过程中融合两类脑网络特征，该模块主要有四个步骤：压缩信息、多模态信息融合、生成通道激励信号和重构特征图。在本方法中，使用了两个深度融合模块用以重构结构脑网络和功能脑网络的连接边层和节点层的特征图；