Google Research: 대화형 AI 에이전트 SymptomAI, 증상 평가의 50% 이상에서 임상의를 능가

Google Research가 SymptomAI를 공개했습니다. 사용자와의 대화를 통해 증상 정보를 수집하고 가능한 원인을 제시하는 시스템인 이 대화형 AI 에이전트는 Gemini Flash 2.0 모델을 기반으로 하며, 일상적인 증상 평가를 목적으로 합니다. 유의할 점은 이는 연구이며 의료 제품이 아니라는 것입니다.

SymptomAI는 임상의와 비교해 증상을 얼마나 잘 평가합니까?

13,917명이 참여한 전국 규모 연구에서 임상 전문가들은 SymptomAI의 권고안을 다른 임상의의 권고안보다 50% 이상의 사례에서 더 우수하다고 평가했습니다. 또한 SymptomAI는 비교 대상 임상의보다 더 높은 top-5 정확도, 즉 실제 진단이 제시된 가장 가능성 높은 다섯 가지 선택지 안에 포함되는 사례의 비율을 기록했습니다.

다섯 가지 프롬프팅 전략과 에이전트 주도 방식의 우위

연구진은 모델의 증상 평가 능력을 가장 잘 활용하는 방식을 찾기 위해 다섯 가지 프롬프팅 전략, 즉 모델에 질의를 구성하는 다섯 가지 다른 방식을 비교했습니다. 에이전트가 대화를 능동적으로 이끌고 추가 질문을 던지는 다섯 가지 에이전트 주도 전략 모두 그러한 주도 없이 진행되는 기본(Base) 전략을 크게 앞섰습니다. SymptomAI의 우위는 임상의 스스로도 평가에 확신이 없었던 상황에서 가장 두드러졌습니다.

Fitbit 생체신호 데이터는 어떤 역할을 합니까?

Fitbit 기기의 데이터는 참가자가 증상을 보고하기도 전에 SymptomAI가 진단한 감염성 질환과 상관관계를 보이는 생리학적 변화를 나타냈습니다. 이는 주관적인 증상 설명뿐 아니라 객관적인 생체신호를 바탕으로 더 이른 시점에 질병을 인지할 가능성을 열어줍니다.

결론

이번 결과는 대화형 증상 평가에서 에이전트 주도 방식이 기본 AI 전략을 능가할 뿐 아니라, 임상 전문가의 평가에 따르면 인간 임상의와의 비교 중 절반 이상에서도 앞선다는 것을 보여줍니다. 다만 이는 아직 연구 단계이며, 완성된 의료 도구가 아니라는 점을 강조해야 합니다.