OpenAI의 o1, 응급실(ER) 환자 진단 정확도 67%로 triage doctors의 50~55%를 앞섰다

하버드 연구진이 Boston의 한 병원 응급실 환자 76명의 전자 의무기록을 바탕으로 OpenAI o1과 인간 의사를 비교했다.

• o1은 정확하거나 매우 근접한 진단에서 **67%**를 기록해 triage doctors의 **50~55%**를 앞섰다.
• 정보가 더 많은 조건에서는 정확도가 **82%**까지 올라갔고, 인간 전문의는 **70~79%**를 기록했지만 차이는 통계적으로 유의미하지 않았다.
• 5개 clinical case study를 활용한 치료 계획 평가에서도 o1은 89%, 46명의 의사는 **34%**였다.

연구진은 이번 실험이 텍스트로 전달 가능한 정보에 한정됐다고 강조했다. 환자의 외형, distress, 비언어적 신호는 제외됐기 때문에, 결과는 AI가 의사를 대체한다기보다 second-opinion 도구로 유용할 수 있음을 보여준다. 다만 안전성, 책임소재, 환자군별 편향은 아직 추가 검증이 필요하다는 지적도 나왔다.