研究人员警告:诊断AI发展速度已超过安全监管Medical AI advancing faster than safety checks – Aged Care Insite

环球医讯 / AI与医疗健康来源:www.agedcareinsite.com.au澳大利亚 - 英语2026-08-29 17:39:02 - 阅读时长3分钟 - 1486字
弗林德斯大学专家在《科学》杂志发表评论警告,尽管最新一代医疗AI在受控环境中已展现出媲美甚至超越人类医生的诊断能力,但其实际应用速度已远远超出安全监管框架的发展。研究表明,某些AI模型在临床病理案例中诊断准确率高达88.6%,急诊分诊准确率达67.1%,但研究人员强调,仅凭准确率无法确保患者安全,体格检查、社会背景等关键环节仍是AI无法替代的。专家呼吁必须建立严格的评估标准,将现实世界患者结果而非实验室表现作为衡量标准,避免出现类似ChatGPT Health分诊不足50%紧急情况的风险,确保AI技术真正改善全球医疗系统的安全性和公平性。
AI诊断安全监管患者安全医疗决策临床推理健康服务患者护理偏见公平
研究人员警告:诊断AI发展速度已超过安全监管

人工智能系统在临床推理任务方面正迅速提升,但研究人员表示,这项技术的发展速度已远远超过了实际医疗应用所需的安全监管框架。

弗林德斯大学专家在《科学》杂志上发表的一篇新评论警告称,尽管先进的人工智能模型在受控研究中已经达到——甚至在某些情况下超过了——医生级别的诊断水平,但这并不意味着它们已经准备好在医院或诊所中部署使用。

这篇评论附带了一项重大国际研究,该研究表明OpenAI的首款推理模型o1-preview能够逐步处理诊断场景,并达到与经验丰富的临床医生相当的准确率。

"医疗决策复杂、风险高且具有深刻的人文性,仅凭准确率——特别是仅基于文本案例的准确率——并不能保证系统对患者是安全的,"共同作者、博士生埃里克·科内利斯(Erik Cornelisse)表示。

科内利斯解释道,最新一代大型语言模型代表了从简单的问答工具向能够进行"看似人类临床推理"的算法转变,但他警告称,这种推理仍局限于狭窄的人工条件。

在一项实验中,该模型在88.6%的已发表临床病理会议案例中达到了精确或近乎精确的诊断,表现优于GPT-4,并在多项指标上超过了医生。在真实的急诊科案例中,该模型在分诊时的诊断准确率达到67.1%,高于两名主治医生。

但弗林德斯大学的研究人员表示,这些结果必须谨慎解读。

体格检查、视觉和听觉线索、患者病史、社会背景以及对结果的责任担当仍然是安全医疗的核心,而这些正是AI目前还无法独立操作的领域。即使GPT-5.3和Gemini 3.1 Pro等新型模型整合了图像、音频和视频等多模态输入,作者们重申,严格的评估必须跟上技术发展的步伐。

高级作者、副教授阿什·霍普金斯(Ash Hopkins)表示,AI的潜力是真实的,但风险也同样存在。

"AI系统已经证明它们能够通过类似医生的方式推理临床问题,特别是在用于培训临床医生本身的相同场景中。这为未来支持临床医生提供了真正的机会,"他说道。

"但临床护理中需要有意识、受控的整合。"

该评论强调了评估不足的系统所伴随的、有据可查的危险,包括偏见、不公平的医疗以及意外的患者伤害。

过去的例子包括加剧健康支出中种族差异的算法,以及对紧急情况分诊不足的面向消费者的AI工具。作者认为,独立评估必须严格、透明,并以人类临床医生为基准,以确保开发者承担相应责任。

他们还警告称,部署速度已超过监管速度。2026年1月,OpenAI推出了ChatGPT Health,这是一个作为个性化健康信息服务推广的消费者工具。

尽管该工具并非为分诊而设计,但在一项独立评估中,它尝试进行分诊任务,并对超过一半的紧急情况分诊不足。研究人员表示,如果没有明确的任务定义和人类对照,就无法确定此类系统是改善还是危及患者护理。

展望未来,弗林德斯大学的研究人员认为,对医疗AI的热情必须与强有力的治理、更清晰的评估标准以及对现实世界患者结果的关注相匹配,而不是仅仅关注基准性能。

"我们不允许医生在没有监督和评估的情况下执业,AI也应被要求达到类似的标准,"科内利斯先生说道。

霍普金斯教授表示,目标应该是改善护理的技术,而不是仅在研究中表现良好的工具。

"患者值得拥有能改善现实世界护理的技术,而不是仅在研究中看起来令人印象深刻的系统,"他说道。

他补充道,通过精心设计、强有力的监管和严格的测试,AI可以成为"一个强大的工具,为全球医疗系统提供更安全、更公平和更有效的护理。"

【全文结束】

猜你喜欢
  • 健康科技革命:人工智能、数据科学与数字疗法融合健康科技革命:人工智能、数据科学与数字疗法融合
  • 五分之二的澳大利亚全科医生使用AI抄写员记录患者病历——但他们是否用关怀换取了便利?五分之二的澳大利亚全科医生使用AI抄写员记录患者病历——但他们是否用关怀换取了便利?
  • 健康差异是当今非裔美国人面临的最大问题健康差异是当今非裔美国人面临的最大问题
  • 全球干细胞医疗美学监管格局:挑战、比较与协调路径全球干细胞医疗美学监管格局:挑战、比较与协调路径
  • 公立医院网络CEO推动AI取代放射科医生,医生们反对公立医院网络CEO推动AI取代放射科医生,医生们反对
  • 全球最大规模研究揭示排除青霉素过敏的新模型全球最大规模研究揭示排除青霉素过敏的新模型
  • AI与医疗设备网络安全:好与坏AI与医疗设备网络安全:好与坏
  • 关于人工智能与校园心理健康你需要知道的事(观点)关于人工智能与校园心理健康你需要知道的事(观点)
  • 健康保险覆盖范围现在由AI决定——你需要了解其保险角色健康保险覆盖范围现在由AI决定——你需要了解其保险角色
  • 健康科技公司数据泄露事件曝光340万患者记录健康科技公司数据泄露事件曝光340万患者记录
热点资讯
全站热点
全站热文