의사 시험 만점 AI, 일반인 환자 질문엔 '오답' 투성이

AI 챗봇, 의료 면허 시험 만점에도 환자 상담엔 '낙제점'

• 의료 면허 시험에서 거의 만점을 받은 AI 챗봇이 일반 환자의 증상 상담에는 인터넷 검색보다 못한 성능을 보인다는 연구 결과가 나왔다.

• 옥스퍼드대 연구팀은 AI가 의사가 설계한 시나리오에서는 높은 정확도를 보였지만, 일반인이 자신의 증상을 설명할 때는 관련 질환 식별 정확도가 34.5% 이하로 크게 떨어졌다고 밝혔다.

• 이는 환자가 핵심 증상을 빠뜨리거나 AI가 능동적으로 질문하지 못하는 점, 그리고 AI가 정확한 정보와 부정확한 정보를 혼합하여 제시하는 문제점 때문인 것으로 분석되었다.

• 연구팀은 AI의 의학 지식량이 곧 진료 능력으로 이어지지 않으며, 교과서적 지식과 실제 환자 상담 능력은 별개의 문제임을 지적하며, AI가 의사 역할을 대체하기에는 아직 준비가 되지 않았다고 결론 내렸다.

htt ps://n.news.naver.com/mnews/article/584/0000036406