AI医学面临的重大挑战:生成式模型仍缺乏独立的临床推理能力

麻省总医院MESH孵化器团队最近的一项研究评估了生成式人工智能的临床推理能力。尽管人工智能正在医学领域取得重大进展,但该研究揭示了在模拟真实世界临床诊断的逻辑链中仍存在显著缺陷。这项发表在权威期刊《JAMA Network Open》上的研究成果明确表明,当前的主流模型尚不具备执行独立临床诊断任务的能力。
该研究利用29个已确立的临床病例,对包括ChatGPT、DeepSeek、Claude、Gemini和Grok在内的21个大型语言模型进行了测试。实验通过逐步披露患者症状、实验室数据和影像结果,模拟了医生的动态诊断过程。 数据表明,在获得完整信息的情况下,所有模型在给出正确最终诊断时的准确率均超过90%。然而,在临床推理的核心领域——鉴别诊断中,超过80%的模型表现不佳,未能系统地分析和优先排序多种潜在病症。
为量化这一差距,研究人员引入了PrIME-LLM综合评估指标,涵盖从初始评估、检查选择到治疗方案制定全过程。各模型的评估得分介于64%至78%之间,这凸显出AI在拥有完整信息时更擅长“揭示答案”,而非在数据不完整的情况下进行开放式逻辑推理。
尽管新模型在处理复杂数据方面较其前代有了显著改进,但研究团队强调,当前应将大型语言模型视为辅助工具。在临床实践中若缺乏专业监督而使用它们,仍存在风险。本研究为人工智能在医疗保健领域的未来发展提供了理性基准:从简单的“答案匹配”向复杂的“逻辑推理”的转变,将是医疗大型模型实现专业级应用的关键门槛。
相关文章
Recursive Intelligence 如何在4个月内以40亿美元估值筹集3.35亿美元
初创公司Ricursive Intelligence的联合创始人似乎注定要成为联合创始人。首席执行官安娜·戈迪(Anna Goldie)和首席技术官阿扎莉亚·米尔霍塞伊尼(Azalia Mirhoseini)在人工智能界声名显赫,戈迪向TechCrunch笑称,她们正是那些“收到扎克伯格发来的奇怪邮件、里面提出疯狂邀约”的人工智能工程师之一。(她们最终没有接受这些邀约。) 两人曾共同在谷歌大脑(G
人工智能竞赛不会等待,TechCrunch Disrupt 的 25% 折扣也不会等待
目前每一位投身人工智能领域的创始人都在思考同一个问题:我们的发展速度够快吗?效率够高吗?TechCrunch Disrupt 2026 将让您与那些正在最高层面思考这一关乎存亡问题的行业领军人物共聚一堂。 10月13日至15日,在旧金山,来自OpenAI、英伟达(Nvidia)、Anthropic、微软等公司的领军人物将分享他们的见解,届时数千名初创企业社区成员将齐聚一堂,进行交流。限时优惠:结账
“钱文AI免费版”与机构版:揭穿高价写作骗局
6月25日,中央电视台播出了关于混乱的高考志愿填报市场的一则调查报道,引发了广泛的公众讨论。 报道画面显示,许多高中升学中介机构打着“十年教龄教师”和“教授”等头衔的旗号,收取4,980至12,980元不等的天价费用。 实际上,这些所谓的“资深顾问”往往是入职不到两个月的新员工,甚至是兼职的大学生。他们的“专业方案”都是通过免费的Qwen AI生成的,有些机构甚至直接将Qwen生成的内容加价转卖给
相关专题推荐
评论 (0)
0/500

麻省总医院MESH孵化器团队最近的一项研究评估了生成式人工智能的临床推理能力。尽管人工智能正在医学领域取得重大进展,但该研究揭示了在模拟真实世界临床诊断的逻辑链中仍存在显著缺陷。这项发表在权威期刊《JAMA Network Open》上的研究成果明确表明,当前的主流模型尚不具备执行独立临床诊断任务的能力。
该研究利用29个已确立的临床病例,对包括ChatGPT、DeepSeek、Claude、Gemini和Grok在内的21个大型语言模型进行了测试。实验通过逐步披露患者症状、实验室数据和影像结果,模拟了医生的动态诊断过程。 数据表明,在获得完整信息的情况下,所有模型在给出正确最终诊断时的准确率均超过90%。然而,在临床推理的核心领域——鉴别诊断中,超过80%的模型表现不佳,未能系统地分析和优先排序多种潜在病症。
为量化这一差距,研究人员引入了PrIME-LLM综合评估指标,涵盖从初始评估、检查选择到治疗方案制定全过程。各模型的评估得分介于64%至78%之间,这凸显出AI在拥有完整信息时更擅长“揭示答案”,而非在数据不完整的情况下进行开放式逻辑推理。
尽管新模型在处理复杂数据方面较其前代有了显著改进,但研究团队强调,当前应将大型语言模型视为辅助工具。在临床实践中若缺乏专业监督而使用它们,仍存在风险。本研究为人工智能在医疗保健领域的未来发展提供了理性基准:从简单的“答案匹配”向复杂的“逻辑推理”的转变,将是医疗大型模型实现专业级应用的关键门槛。
Recursive Intelligence 如何在4个月内以40亿美元估值筹集3.35亿美元
初创公司Ricursive Intelligence的联合创始人似乎注定要成为联合创始人。首席执行官安娜·戈迪(Anna Goldie)和首席技术官阿扎莉亚·米尔霍塞伊尼(Azalia Mirhoseini)在人工智能界声名显赫,戈迪向TechCrunch笑称,她们正是那些“收到扎克伯格发来的奇怪邮件、里面提出疯狂邀约”的人工智能工程师之一。(她们最终没有接受这些邀约。) 两人曾共同在谷歌大脑(G
人工智能竞赛不会等待,TechCrunch Disrupt 的 25% 折扣也不会等待
目前每一位投身人工智能领域的创始人都在思考同一个问题:我们的发展速度够快吗?效率够高吗?TechCrunch Disrupt 2026 将让您与那些正在最高层面思考这一关乎存亡问题的行业领军人物共聚一堂。 10月13日至15日,在旧金山,来自OpenAI、英伟达(Nvidia)、Anthropic、微软等公司的领军人物将分享他们的见解,届时数千名初创企业社区成员将齐聚一堂,进行交流。限时优惠:结账
“钱文AI免费版”与机构版:揭穿高价写作骗局
6月25日,中央电视台播出了关于混乱的高考志愿填报市场的一则调查报道,引发了广泛的公众讨论。 报道画面显示,许多高中升学中介机构打着“十年教龄教师”和“教授”等头衔的旗号,收取4,980至12,980元不等的天价费用。 实际上,这些所谓的“资深顾问”往往是入职不到两个月的新员工,甚至是兼职的大学生。他们的“专业方案”都是通过免费的Qwen AI生成的,有些机构甚至直接将Qwen生成的内容加价转卖给





首页






