医生使用的AI系统在患者就诊过程中产生幻觉编造不存在的医疗问题Doctors' AI Systems Are Hallucinating Nonexistent Medical Issues During Appointments With Patients

环球医讯 / AI与医疗健康来源:futurism.com加拿大 - 英语2026-05-28 19:52:14 - 阅读时长2分钟 - 829字
加拿大安大略省审计长发布特别报告指出,经政府批准的20种AI医疗记录系统在采购测试阶段均存在不同程度的不准确性,包括产生幻觉(编造信息)、提供错误信息或遗漏关键内容等问题。尽管安大略省官员称这些问题仅在测试阶段发现,实际诊疗中未出现,但审计长表示已有约5000名医生在使用这些系统。同时,美国的OpenEvidence等AI系统也因产生幻觉和提供不完整答案而受到越来越多的审查,医学界对AI系统在医疗领域的应用安全性提出严重质疑。
AI医疗记录系统AI幻觉医疗信息不准确患者健康风险不适当治疗医疗记录失真
医生使用的AI系统在患者就诊过程中产生幻觉编造不存在的医疗问题

如果你在过去两三年内看过医生,很可能你的医生使用了AI记录员:一种能够监听医患对话、将其转录并整理成医疗记录格式的软件。

理论上这是一个很酷的想法,但问题不少。本周早些时候,安大略省审计长——安大略省立法议会的问责官员——发布了一份特别报告,警告称AI医疗记录系统"评估不足",可能会向医疗专业人员提供"编造的信息"。

据《环球新闻》首次报道,这项审计调查了20种AI记录平台,发现"所有20家政府批准供应商的AI记录系统在采购测试阶段均显示一个或多个不准确之处",例如"产生幻觉(编造信息)、提供错误信息或遗漏/不完整信息"。

报告声明:"AI记录系统生成的医疗记录中的不准确信息可能会导致不适当或有害的治疗计划,可能影响患者的健康结果。"

然而,安大略省公共服务和商务交付与采购部长斯蒂芬·克劳福德指出,这些幻觉是在州监管机构测试期间观察到的,在实际医疗就诊中并未记录到。

克劳福德对《环球新闻》表示:"让我们非常明确这一点,这些系统实际上并未与医生一起投入运营使用,它们仍处于我们审查各种记录系统的可选阶段。"

尽管如此,审计长谢莉·斯宾斯指出,各种记录系统仍在安大略省约5000名医生中使用。在与记者交谈时,斯宾斯表示她甚至要求她的医生在她自己的就诊结束后"请查看一下转录内容"。

与此同时,另一款AI记录系统OpenEvidence在美国也因产生幻觉和提供不完整答案而面临越来越多的审查。

例如,几位医生告诉《NBC新闻》,OpenEvidence有时会从样本量相对较小的医学研究中得出过于强烈的结论。

尽管许多医生对这一新工具表示赞赏,但它们在现实世界条件下的表现如何——以及当AI热潮消退后医学界将如何评判它们——仍有待观察。

关于AI幻觉的更多信息:完全由AI幻觉构成的新版维基百科克隆

【全文结束】

猜你喜欢
  • 破解临床研究格局破解临床研究格局
  • 将心血管预防带到罗马锡耶纳广场将心血管预防带到罗马锡耶纳广场
  • AI绘制大脑废物清除流动图,揭示与深度睡眠相关的两种流速AI绘制大脑废物清除流动图,揭示与深度睡眠相关的两种流速
  • 利用ODRS系统"捕捞"创新药物:潜在益处与挑战利用ODRS系统"捕捞"创新药物:潜在益处与挑战
  • AI通过分析Reddit帖子发现临床试验中遗漏的奥司美肽副作用AI通过分析Reddit帖子发现临床试验中遗漏的奥司美肽副作用
  • 种子大小的手术机器人将五种功能集成于4.4毫米微型装置中种子大小的手术机器人将五种功能集成于4.4毫米微型装置中
  • 皇家普雷斯顿医院将开设突破性中风研究枢纽皇家普雷斯顿医院将开设突破性中风研究枢纽
  • 欧盟生物技术法案加大希腊竞争压力 行业警告需加速改革欧盟生物技术法案加大希腊竞争压力 行业警告需加速改革
  • Fitbit Air与Google Health:谷歌在健身与健康领域的重大重启概览Fitbit Air与Google Health:谷歌在健身与健康领域的重大重启概览
  • 神经纤维瘤病威胁女孩行动能力 家属紧急筹款实施手术避免瘫痪神经纤维瘤病威胁女孩行动能力 家属紧急筹款实施手术避免瘫痪
热点资讯
全站热点
全站热文