arXiv:2605.04012: SymptomAI in der Fitbit-App übertrifft mit 13.917 Patienten unabhängige Kliniker bei der Differentialdiagnose

Ein Team unter Beteiligung von Forschern von Google und Fitbit hat ein Preprint über SymptomAI veröffentlicht, einen konversationellen Agenten, der in die Fitbit-App für die alltägliche Symptombewertung integriert ist. Die Studie setzte fünf verschiedene KI-Agenten bei etwa 13.917 Teilnehmern ein, um ihren diagnostischen Nutzen unter realen Bedingungen zu messen.

Was hat die Studie wirklich gemessen?

Der konversationelle Agent führt den Nutzer durch ein strukturiertes Gespräch über Symptome und bietet eine gerankte Differentialdiagnose — eine nach Wahrscheinlichkeit geordnete Liste möglicher Erkrankungen, die Kliniker nutzen, bevor sie die endgültige Diagnose durch Tests bestätigen.

In der klinischen Evaluation hatten 1.228 Teilnehmer bestätigte Diagnosen, während 517 eine verblindete Bewertung durch Kliniker-Panels mit über 250 Stunden Annotation durchliefen. Die Ergebnisse wurden an weiteren 1.500+ Teilnehmern aus allgemeinen US-Panels validiert.

Wie zuverlässig ist das Ergebnis?

Die Diagnoseempfehlungen des SymptomAI-Agenten erzielten statistisch signifikant bessere Ergebnisse als unabhängige Kliniker, die dieselben Gespräche bewerteten, mit einem Odds Ratio von 2,47 (p < 0,001). Agenten, die ein spezialisiertes Symptom-Interview nutzten und vor der Diagnose zusätzliche Informationen sammelten, übertrafen nutzergeführte Varianten deutlich.

Ein wichtiger Vorbehalt: Die Arbeit ist ein Preprint ohne Peer-Review, der Fokus liegt auf der Bewertung von Gesprächstranskripten, und Kliniker in der Kontrollgruppe hatten keinen Zugang zum Patienten persönlich, zur körperlichen Untersuchung oder zu zusätzlichen Tests. Die Autoren selbst nennen die Einschränkung durch selbstberichteten Ground Truth bei der Analyse von Wearable-Daten über fast 400 Erkrankungen. Diese Arbeit zeigt das Potenzial häuslicher KI-Symptomassistenten, ändert aber die klinische Praxis erst, wenn sie unabhängige Replikation und behördliche Bewertung durchlaufen hat.