科研之友
微信
新浪微博
Facebook
分享链接
摘要
针对基于单模态影像数据实现阿尔兹海默病（AD）辅助分类的方法存在单模态数据提取病理信息有限、影像特征提取不稳定以及分类准确率偏低等问题，提出一种基于多模态数据的AD分类方法。该方法首先根据临床中对AD诊断时需要多种检查方式综合分析的特点，采用核磁共振成像（MRI）、量表、生物标志物、基因四种多模态数据实现AD辅助诊断，并针对多模态数据的特点设计了多模态分类网络。多模态分类网络搭建了影像数据和非影像数据两条特征提取网络分支：前者将预处理后的MRI影像数据送入改进后的网络进行特征提取，改进的网络以残差网络（ResNet）为主体，将坐标注意力（CA）模块嵌入残差结构中，使网络模型关注到MRI影像中的AD病变位置区域；后者将量表、生物标志物和基因等非影像数据送入多层感知机提取特征信息。最后将提取到的MRI影像特征和非影像特征通过特征融合后实现分类。实验结果表明，在无泄漏多模态数据集下，改进后的MRI影像特征提取网络相较于基础网络ResNet,AD/轻度认知障碍（MCI）/认知正常（CN）三分类准确率提升了5.42个百分点，AD/CN二分类准确率提升了8.87个百分点，验证了网络改进的有效性；多模态融合后的AD/CN准确率为92.89%，相较于单模态MRI影像数据提升了8.40个百分点，AD/MCI/CN分类准确率则提升了13.51个百分点，有效地验证了提出的方法能融合各种模态的病理信息，有效提高AD分类的准确率。综上，所提方法能有效地提升AD辅助诊断性能。
- 出版日期2023
- 单位四川大学
