D2RNC-AI:一种用于早期检测糖尿病视网膜病变、肾病和心血管疾病的多模态AI框架D2RNC-AI: A Multi-Modal AI Framework for Early Detection of Diabetic Retinopathy, Nephropathy, and Cardiovascular Disease by Mian Muhammad Hamza, Ruhma Shahbaz :: SSRN

环球医讯 / AI与医疗健康来源:papers.ssrn.com巴基斯坦 - 英语2026-05-08 09:29:42 - 阅读时长2分钟 - 867字
本研究提出D2RNC-AI多模态AI框架,首次实现对糖尿病三大并发症(视网膜病变、肾病和心血管疾病)的统一筛查,该系统整合六种模态数据(眼底图像、肾脏超声图像、心电图及三种临床表格数据),采用CNN-Transformer混合架构和机器学习分类器,测试准确率达79.61%-98.99%,AUC值0.895-0.999,提供SHAP值和Grad-CAM热图增强临床解释性,开源设计使该系统可直接应用于全球医疗资源匮乏地区,为糖尿病并发症早期诊断提供高效、经济的解决方案。
D2RNCAI糖尿病糖尿病视网膜病变糖尿病肾病心血管疾病多模态AI框架早期并发症筛查临床可解释性
D2RNC-AI:一种用于早期检测糖尿病视网膜病变、肾病和心血管疾病的多模态AI框架

背景:全球糖尿病患者超过5.37亿,该疾病悄然引发三大严重并发症:糖尿病视网膜病变(DR)、糖尿病肾病(DN)和心血管疾病(CVD)。目前每种并发症都需要不同专科医生进行诊断,导致早期筛查成本高昂、速度缓慢,在资源匮乏地区难以实施。此前,尚未有开源系统能够同时覆盖图像和临床表格数据,实现对三种并发症的统一AI诊断并提供可解释性和实时部署功能。

方法:我们提出D2RNC-AI,这是一种跨六种模态的多模态深度学习与机器学习框架,涵盖眼底图像(DR)、肾脏超声图像(DN)、心电图图像(CVD)以及三个临床/电子健康记录表格数据集。图像模型采用混合CNN-Transformer架构(包括EfficientNetB3、DenseNet121、EfficientNetB3+ViT)。针对每个表格数据集,我们对九种机器学习分类器进行了基准测试,其中XGBoost和梯度提升表现最佳。SHAP值和Grad-CAM热图提供了预测结果的临床可解释性。通过微调Llama-3-8B大型语言模型(LoRA)和Flask网页门户,完成了端到端部署流程。

结果:在五个严重程度等级上,DR图像分类测试准确率达到87.40%(AUC 0.951)。DN图像分类在五类肾脏超声图像上准确率达到79.61%(AUC 0.937)。CVD心电图分类使用EfficientNetB3-ViT混合模型,准确率达到88.51%,平均AUC值为0.974。在表格数据方面,DN梯度提升模型准确率达到98.99%(AUC 0.999);CVD随机森林模型准确率为85.00%(AUC 0.895);DR XGBoost模型准确率约为83%。每位患者的SHAP置信度范围为82%-96%,Grad-CAM激活图始终能准确突出解剖学上正确的病理区域。

结论:D2RNC-AI证明,单一、连贯的开源框架能够以临床医生级别的准确度同时筛查三种主要糖尿病并发症。六个公开可用的数据集、训练好的模型检查点和可部署的网页门户使该系统能够直接复制并扩展到实际临床应用中。

【全文结束】

猜你喜欢
  • AI眼筛查在检测六种代谢疾病方面显示出潜力AI眼筛查在检测六种代谢疾病方面显示出潜力
  • AI能否缓解医生与患者关于肥胖症的对话困境AI能否缓解医生与患者关于肥胖症的对话困境
  • 常规头部CT扫描结合人工智能分析或可改善心血管疾病识别常规头部CT扫描结合人工智能分析或可改善心血管疾病识别
  • 医疗AI数据输入如何助力或损害医疗保健医疗AI数据输入如何助力或损害医疗保健
  • 40岁以上黑人男性面临的隐性健康危机——为何往往发现过晚40岁以上黑人男性面临的隐性健康危机——为何往往发现过晚
  • 破除肺癌七大常见误区破除肺癌七大常见误区
  • 新研究发现代谢综合征与癌症风险之间存在关联新研究发现代谢综合征与癌症风险之间存在关联
  • AI模型可检测胰腺癌0期常规"不可见"的组织变化AI模型可检测胰腺癌0期常规"不可见"的组织变化
  • 乌尔斯特大学获得重要资金支持在德里开展拯救生命的AI试验乌尔斯特大学获得重要资金支持在德里开展拯救生命的AI试验
  • 人工智能:AI通过视网膜图像识别慢性疾病人工智能:AI通过视网膜图像识别慢性疾病
热点资讯
全站热点
全站热文