不可想象的危险:研究显示ChatGPT Health可能会遗漏危及生命的紧急情况'Unbelievably dangerous': ChatGPT Health may miss life-threatening emergencies, finds study | The Business Standard

环球医讯 / AI与医疗健康来源:www.tbsnews.net美国 - 英语2026-09-14 00:52:22 - 阅读时长2分钟 - 800字
一项发表在《自然医学》期刊的独立安全评估研究指出,OpenAI于2026年1月推出的ChatGPT Health健康咨询功能存在严重安全隐患。该工具在测试中经常未能识别危及生命的医疗紧急情况,在51.6%需要立即住院的病例中建议患者居家或预约常规门诊,并可能因引入无关信息(如正常化验结果)而忽视自杀意念,专家警告这会造成虚假安全感并可能导致可预防的伤害甚至死亡。
健康人工智能医疗紧急情况安全风险误诊自杀意念监管误判
不可想象的危险:研究显示ChatGPT Health可能会遗漏危及生命的紧急情况

专家和医学研究人员对OpenAI于2026年1月推出的ChatGPT Health功能的安全性表示担忧。该功能通过连接用户的医疗记录和健康应用提供健康建议。

该研究发表在《自然医学》期刊,是该工具首次独立的第三方安全评估。结果显示,人工智能经常无法识别危及生命的医疗紧急情况。

这项由Ashwin Ramaswamy博士主导的研究使用了60个真实的患者场景对AI进行测试。结果发现,在医学上需要立即住院治疗的案例中,有51.6%的情况ChatGPT Health建议用户留在家中或预约常规门诊。

在模拟呼吸衰竭或糖尿病酮症酸中毒的场景中,研究人员指出AI有“五五开”的概率会低估病情的严重性。在一个哮喘场景中,尽管平台识别出了呼吸衰竭的迹象,但它仍然建议等待未来的预约,而不是立即寻求紧急救治。

如果“患者”提到朋友认为情况不严重,AI将症状轻描淡写的可能性高出12倍。反之,它又建议64.8%的健康个体立即就医,专家认为这可能导致不必要的就诊。

研究人员特别关注AI对自杀意念的处理。当患者单独提到有自杀想法时,平台会显示危机干预横幅;但当场景中包含“正常化验结果”时,这些防护措施在每次尝试中(0次成功,共16次)都失效了。Ramaswamy博士表示,依赖化验结果等无关数据而失效的防护措施“可以说比根本没有防护更危险”,因为其失效是不可预测的。

包括伦敦大学学院的Alex Ruani在内的专家形容这一发现“不可想象地危险”,警告AI会造成“虚假安全感”,可能导致可预防的伤害或死亡。Paul Henman教授指出,随着与AI相关的自杀和自残案件进入法律系统,科技公司可能面临法律责任。

OpenAI的一位发言人表示,该研究并未反映人们在实际生活中使用该工具的典型方式,并强调模型会持续更新和优化。但研究人员坚持认为,“潜在的伤害风险”证明了迫切需要独立监管和更严格的安全标准。

【全文结束】

猜你喜欢
  • AI在医疗实践中的应用:2026年医师与管理者须知AI在医疗实践中的应用:2026年医师与管理者须知
  • 妊娠期间及产后心力衰竭妊娠期间及产后心力衰竭
  • 女性动脉粥样硬化斑块较少,但心脏病发作风险与男性相同女性动脉粥样硬化斑块较少,但心脏病发作风险与男性相同
  • 妊娠生物标志物揭示女性长期心血管风险妊娠生物标志物揭示女性长期心血管风险
  • 具身人工智能从屏幕走向手术室:医疗保健领域的重大转变具身人工智能从屏幕走向手术室:医疗保健领域的重大转变
  • 医生:人工智能已在爱沙尼亚拯救生命医生:人工智能已在爱沙尼亚拯救生命
  • 如果有人中风,该做和不该做的事如果有人中风,该做和不该做的事
  • 利用AI聊天机器人(如ChatGPT)进行年度心理健康检查利用AI聊天机器人(如ChatGPT)进行年度心理健康检查
  • 女性在较低冠状动脉斑块负荷下即出现主要不良心血管事件风险女性在较低冠状动脉斑块负荷下即出现主要不良心血管事件风险
  • 如何利用医疗保健中的AI加强医患关系如何利用医疗保健中的AI加强医患关系
热点资讯
全站热点
全站热文