arXiv:2607.15166: MedFailBench misst, WIE medizinische KI-Systeme versagen, nicht nur die Genauigkeit, anhand von 44 Fällen

Was misst MedFailBench anders als klassische Benchmarks?

MedFailBench ist ein von Klinikern entwickelter Benchmark mit dem Ziel, den Versagensmodus (failure mode) medizinischer KI-Systeme zu messen — das konkrete Muster, in dem ein System einen Fehler macht — statt sich wie üblich ausschließlich auf den Anteil korrekter Antworten zu konzentrieren. Diese Verschiebung des Fokus erlaubt es, einen harmlosen Fehler von einem zu unterscheiden, der einen Patienten gefährdet.

Fünf Schweregrade und sechs Fehlertypen

Fehler werden nach Schweregrad auf einer Skala von 1 bis 5 sowie nach sechs Typen kategorisiert: übersehene Notfälle, unsichere Medikamentendosen, unsichere Entlassungsentscheidungen, erfundene Belege, unsichere Protokollausführung und fehlende Quellenunterstützung (source support gap). Eine solche Taxonomie zeigt genau, wo ein Modell versagt, nicht nur, dass es versagt hat.

Inhalt von Version v0.2.1

Die aktuelle Version v0.2.1 enthält 44 klinisch geprüfte synthetische Fälle, eine Sicherheitstaxonomie, einen klinischen Bewertungsrubrik sowie eine automatisierte Screening-Pipeline, die die Prüfung neuer Modelle beschleunigt.

Was MedFailBench bewusst nicht enthält

Die Autoren betonen ausdrücklich, dass der Benchmark keine Daten realer Patienten, klinischen Validierungsaussagen oder Modell-Ranglisten enthält — es handelt sich um ein Werkzeug zur Aufdeckung von Sicherheitsgrenzen, nicht um ein Zertifikat klinischer Einsetzbarkeit. Das Projekt wurde unter den Lizenzen Apache-2.0 und CC-BY-4.0 veröffentlicht, mit einer DOI bei Zenodo, was es im Vergleich zu klassischen, genauigkeitsorientierten Benchmarks transparenter für eine unabhängige Prüfung macht.