开发和验证用于区分胶质母细胞瘤和单发性脑转移瘤的多模态融合深度学习模型

作者：申珊珊; 李春泉; 范耀华; 卢山富; 颜子夜; 刘虎; 周海航; 张子健^*

来源：中南大学学报(医学版), 2024, 1-10.

• 胶质母细胞瘤
• 单发性脑转移瘤
• 深度学习
• 多模态数据
• 解纠缠

目的：胶质母细胞瘤(glioblastoma,GBM)和脑转移瘤(brain metastases,BMs)是成人中常见的恶性脑肿瘤，目前磁共振成像(magnetic resonance imaging,MRI)是筛查和评估脑肿瘤预后的常用方法，但其鉴别诊断GBM和BMs的特异性和敏感性有限。近年来，深度神经网络在诊断分类和创建临床决策支持系统方面显示出极大的潜力。本研究旨在应用深度学习技术提取的放射组学特征，探讨其在初诊GBM和单发性脑转移瘤(solitary brain metastases,SBMs)术前准确分类中的可行性，进一步探索基于多模态数据融合对分类任务的影响。方法：回顾性分析经组织病理或临床诊断证实的135例初诊GBM患者和73例SBMs患者的头颅MRI序列数据。首先，选择结构性T1加权、T1C加权和T2加权作为整个模型的3个输入，在配准后的3种模态MR图像上人工勾画感兴趣区域(regions of interest,ROI)，并获取多模态放射组学特征，使用基于随机森林(random forest,RF)的特征选择方法降低维度，进一步分析每个特征的重要性。然后，通过对比解纠缠的方法寻找不同模态特征之间的共享特征和互补特征。最后，通过融合不同模态的2种特征，预测每个样本对GBM和SBMs的响应。结果：应用机器学习和本文提出的多模态融合方法的放射组学特征对GBM和SBMs有较好的区分能力。相较于单模态数据，应用支持向量机(support vector machine,SVM)、逻辑回归(logistic regression,LR)、RF、自适应增强(adaptive boosting,AdaBoost)、梯度提升决策树(gradient boosting decision tree,GBDT)机器学习算法的多模态融合模型均取得了较大提升，曲线下面积(area under the curve,AUC)分别为0.974、0.978、0.943、0.938、0.947。本研究的对比解纠缠多模态MR融合方法表现更好，测试集上AUC、准确度(accuracy,ACC)、灵敏度(sensitivity,SEN)、特异度(specificity,SPE)分别为0.985、0.984、0.900、0.990。相较于其他多模态融合方法，本研究方法的AUC、ACC和SEN均呈现出最好的性能表现。验证本研究各模块组件作用的消融实验中，同时使用3种损失函数后，AUC、ACC和SEN分别提升了1.6%、10.9%和15.0%。结论：基于深度学习的对比解纠缠多模态MR放射组学特征融合技术有助于提高GBM和SBMs的分类准确性。

• 出版日期2024
• 单位中南大学湘雅医院; 南昌大学信息工程学院