arXiv:2607.15166: MedFailBench, 44개 사례로 의료 AI 시스템의 실패 방식을 측정—정확도만이 아니다

MedFailBench는 기존 벤치마크와 무엇이 다르게 측정하는가?

MedFailBench는 임상의가 구축한 벤치마크로, 정답률에만 초점을 맞추는 일반적인 방식 대신 의료 AI 시스템의 실패 방식(failure mode)—시스템이 오류를 범하는 구체적인 패턴—을 측정하는 것을 목표로 합니다. 이러한 초점의 전환은 무해한 오류와 환자를 위험에 빠뜨리는 오류를 구분할 수 있게 해줍니다.

다섯 단계의 심각도와 여섯 가지 오류 유형

오류는 1부터 5까지의 심각도 척도와 여섯 가지 유형—놓친 응급 상황, 안전하지 않은 약물 용량, 안전하지 않은 퇴원 결정, 증거 조작, 안전하지 않은 프로토콜 실행, 그리고 출처 근거 부족(source support gap)—으로 분류됩니다. 이러한 분류 체계는 모델이 실패했다는 사실뿐 아니라 정확히 어디서 실패하는지를 드러냅니다.

v0.2.1 버전에는 무엇이 포함되어 있는가?

현재 버전인 v0.2.1에는 임상적으로 검토된 44개의 합성 사례, 안전 분류 체계, 임상 채점 기준, 그리고 새로운 모델 검증을 가속화하는 자동화된 스크리닝 파이프라인이 포함되어 있습니다.

MedFailBench가 의도적으로 포함하지 않은 것은?

저자들은 이 벤치마크에 실제 환자 데이터, 임상적 타당성 주장, 모델 순위 중 어느 것도 포함되어 있지 않다는 점을 명확히 강조합니다. 이는 임상적 유용성을 인증하는 증명서가 아니라 안전 경계를 발견하기 위한 도구입니다. 이 프로젝트는 Apache-2.0과 CC-BY-4.0 라이선스로 공개되었으며 Zenodo에 DOI가 등록되어 있어, 전통적인 정확도 중심 벤치마크에 비해 독립적인 검증에 더 투명합니다.