AI 의료가 직면한 난제: 생성형 모델은 여전히 독자적인 임상적 추론 능력이 부족하다

매사추세츠 종합병원(Massachusetts General Hospital)의 MESH 인큐베이터 팀이 최근 수행한 연구에서 생성형 AI의 임상 추론 능력을 평가했다. AI가 의학 분야에 크게 진출하고 있지만, 이 연구는 시뮬레이션된 실제 임상 진단 과정에서 논리적 연결 고리에 지속적인 한계가 있음을 드러냈다. 권위 있는 학술지 ‘JAMA Network Open’에 게재된 이 연구 결과는 현재의 주류 모델들이 아직 독립적인 임상 진단 작업을 수행할 준비가 되어 있지 않음을 분명히 보여준다.
이 연구는 ChatGPT, DeepSeek, Claude, Gemini, Grok 등 21개의 대규모 언어 모델을 대상으로 29개의 확립된 임상 사례를 활용해 테스트를 진행했다. 실험은 환자의 증상, 검사 데이터, 영상 결과를 점진적으로 공개함으로써 의사의 역동적인 진단 과정을 모방했다. 데이터에 따르면, 완전한 정보를 제공받았을 때 모든 모델은 올바른 최종 진단을 내리는 데 90% 이상의 정확도를 보였다. 그러나 임상 추론의 핵심 영역인 감별 진단에서는 80% 이상의 모델이 저조한 성과를 보였으며, 여러 잠재적 질환을 체계적으로 분석하고 우선순위를 매기지 못했다.
이러한 격차를 정량화하기 위해 연구진은 초기 평가와 검사 선택부터 치료 계획 수립에 이르는 전 과정을 포괄하는 'PrIME-LLM' 종합 평가 지수를 도입했다. 모델별 평가 점수는 64%에서 78% 사이였으며, 이는 AI가 불완전한 데이터로 열린 논리적 추론을 수행하는 것보다 완전한 정보를 바탕으로 '정답을 제시하는' 데 더 능숙함을 보여준다.
최신 모델들은 이전 모델들에 비해 복잡한 데이터 처리 능력에서 현저한 개선을 보였지만, 연구팀은 현재 대규모 언어 모델을 보조 도구로 간주해야 한다고 강조했다. 전문가의 감독 없이 임상 현장에서 이를 사용하는 것은 여전히 위험을 수반한다. 본 연구는 의료 분야에서 AI의 미래를 위한 합리적인 기준을 제시한다. 단순한 '정답 일치'에서 복잡한 '논리적 추론'으로의 전환이 의료용 대규모 모델이 전문가 수준의 적용을 달성하기 위한 결정적인 관문이 될 것이다.
관련 기사
딥마인드 CEO 하사비스: 하루 6시간 수면, 보통 오후 1시경에 활력을 느낍니다
Fortune는 최근 Google DeepMind의 CEO인 데미스 하사비스와의 인터뷰를 소개하며, 그의 비전통적인 휴식 및 생산성 접근 방식을 공개했다. 하사비스는 자신이 매우 적게 잠을 자며, 깨어 있는 시간을 두 개의 명확한 업무 블록으로 구조화한다고 밝혔다.그의 수면 습관에 대해 하사비스는 "6시간을 목표로 하지만, 제 습관은 비정형적입니다. 하루 종일 효과적으로 기능할 수 있습니다."라고 언급했다. 그는 6시간 미만의 수면이 뇌 건강
OpenAI와 Anthropic, 매출 부진 속에서도 시장 점유율 확보 경쟁
최근 OpenAI가 매출 목표를 달성하지 못했다는 보도가 나오면서 이번 주 화요일 기술주에 압박이 가해졌음에도 불구하고, 민간 AI 연구소 투자자들은 여전히 탄탄한 모습을 보이고 있다. 노련한 투자자들은 부정적인 언론 보도에도 불구하고 투자 규모를 줄이지 않을 것이라고 밝혔다.분석가들은 현재의 AI 경쟁이 초기 단계에 불과하다고 보고, “승자 독식” 식의
캘리포니아 자율주행차 규정 준수: 과태료, 지오펜스, 100만 마일의 새로운 시대
Guident는 남부 플로리다에서 AuveTech 셔틀을 운영하며, 자사의 원격 모니터링 기술을 활용해 웨스트 팜비치에서 4마일 구간과 보카 라톤에서 1마일 구간의 노선을 관리하고 있다. | 출처: Guident캘리포니아주는 자율주행차에 대한 규제 환경을 재정의하며, 기술 업계의 “빠르게 움직이고 실패를 감수하라(move fast and break thin
관련 특별 주제 추천
의견 (0)
0/500

매사추세츠 종합병원(Massachusetts General Hospital)의 MESH 인큐베이터 팀이 최근 수행한 연구에서 생성형 AI의 임상 추론 능력을 평가했다. AI가 의학 분야에 크게 진출하고 있지만, 이 연구는 시뮬레이션된 실제 임상 진단 과정에서 논리적 연결 고리에 지속적인 한계가 있음을 드러냈다. 권위 있는 학술지 ‘JAMA Network Open’에 게재된 이 연구 결과는 현재의 주류 모델들이 아직 독립적인 임상 진단 작업을 수행할 준비가 되어 있지 않음을 분명히 보여준다.
이 연구는 ChatGPT, DeepSeek, Claude, Gemini, Grok 등 21개의 대규모 언어 모델을 대상으로 29개의 확립된 임상 사례를 활용해 테스트를 진행했다. 실험은 환자의 증상, 검사 데이터, 영상 결과를 점진적으로 공개함으로써 의사의 역동적인 진단 과정을 모방했다. 데이터에 따르면, 완전한 정보를 제공받았을 때 모든 모델은 올바른 최종 진단을 내리는 데 90% 이상의 정확도를 보였다. 그러나 임상 추론의 핵심 영역인 감별 진단에서는 80% 이상의 모델이 저조한 성과를 보였으며, 여러 잠재적 질환을 체계적으로 분석하고 우선순위를 매기지 못했다.
이러한 격차를 정량화하기 위해 연구진은 초기 평가와 검사 선택부터 치료 계획 수립에 이르는 전 과정을 포괄하는 'PrIME-LLM' 종합 평가 지수를 도입했다. 모델별 평가 점수는 64%에서 78% 사이였으며, 이는 AI가 불완전한 데이터로 열린 논리적 추론을 수행하는 것보다 완전한 정보를 바탕으로 '정답을 제시하는' 데 더 능숙함을 보여준다.
최신 모델들은 이전 모델들에 비해 복잡한 데이터 처리 능력에서 현저한 개선을 보였지만, 연구팀은 현재 대규모 언어 모델을 보조 도구로 간주해야 한다고 강조했다. 전문가의 감독 없이 임상 현장에서 이를 사용하는 것은 여전히 위험을 수반한다. 본 연구는 의료 분야에서 AI의 미래를 위한 합리적인 기준을 제시한다. 단순한 '정답 일치'에서 복잡한 '논리적 추론'으로의 전환이 의료용 대규모 모델이 전문가 수준의 적용을 달성하기 위한 결정적인 관문이 될 것이다.
딥마인드 CEO 하사비스: 하루 6시간 수면, 보통 오후 1시경에 활력을 느낍니다
Fortune는 최근 Google DeepMind의 CEO인 데미스 하사비스와의 인터뷰를 소개하며, 그의 비전통적인 휴식 및 생산성 접근 방식을 공개했다. 하사비스는 자신이 매우 적게 잠을 자며, 깨어 있는 시간을 두 개의 명확한 업무 블록으로 구조화한다고 밝혔다.그의 수면 습관에 대해 하사비스는 "6시간을 목표로 하지만, 제 습관은 비정형적입니다. 하루 종일 효과적으로 기능할 수 있습니다."라고 언급했다. 그는 6시간 미만의 수면이 뇌 건강
OpenAI와 Anthropic, 매출 부진 속에서도 시장 점유율 확보 경쟁
최근 OpenAI가 매출 목표를 달성하지 못했다는 보도가 나오면서 이번 주 화요일 기술주에 압박이 가해졌음에도 불구하고, 민간 AI 연구소 투자자들은 여전히 탄탄한 모습을 보이고 있다. 노련한 투자자들은 부정적인 언론 보도에도 불구하고 투자 규모를 줄이지 않을 것이라고 밝혔다.분석가들은 현재의 AI 경쟁이 초기 단계에 불과하다고 보고, “승자 독식” 식의





집






