Google Research: SymptomAI, ein konversationeller KI-Agent, übertrifft Kliniker bei über 50 % der Symptomeinschätzungen

Google Research hat SymptomAI vorgestellt — einen konversationellen KI-Agenten, also ein System, das im Dialog mit dem Nutzer Informationen über Symptome sammelt und mögliche Erklärungen vorschlägt, basierend auf dem Modell Gemini Flash 2.0, konzipiert für die alltägliche Symptomeinschätzung. Hinweis: Es handelt sich um Forschung, nicht um ein Medizinprodukt.

Wie gut schätzt SymptomAI Symptome im Vergleich zu Klinikern ein?

In einer landesweiten Studie mit 13.917 Teilnehmenden bewerteten klinische Experten die Empfehlungen von SymptomAI in über 50 % der Fälle als besser als die Empfehlungen anderer Kliniker. Zudem erzielte SymptomAI eine höhere Top-5-Genauigkeit — den Anteil der Fälle, in denen die tatsächliche Diagnose unter den fünf wahrscheinlichsten angebotenen Optionen liegt — als die zum Vergleich herangezogenen Kliniker.

Fünf Prompting-Strategien und der Vorteil des agentengesteuerten Ansatzes

Die Forschenden verglichen fünf Prompting-Strategien, also fünf verschiedene Arten, Anfragen an das Modell zu strukturieren, um zu ermitteln, welcher Ansatz die Fähigkeiten des Modells zur Symptomeinschätzung am besten nutzt. Alle fünf agentengesteuerten Strategien, bei denen der Agent das Gespräch aktiv führt und Zusatzfragen stellt, übertrafen die Basisstrategie (Base) ohne eine solche Führung deutlich. Der Vorteil von SymptomAI zeigte sich am größten gerade in Situationen, in denen die Kliniker selbst bei ihrer Einschätzung unsicher waren.

Welche Rolle spielen Fitbit-Biosignaldaten?

Daten von Fitbit-Geräten zeigten physiologische Veränderungen, die mit den Diagnosen von SymptomAI zu Infektionskrankheiten korrelierten — und zwar bevor die Teilnehmenden überhaupt Symptome meldeten. Das eröffnet die Möglichkeit einer früheren Erkennung von Erkrankungen anhand objektiver Biosignale statt ausschließlich anhand der subjektiven Beschreibung von Beschwerden.

Fazit

Die Ergebnisse zeigen, dass ein agentengesteuerter Ansatz bei der konversationellen Symptomeinschätzung sowohl die KI-Basisstrategie als auch, nach Einschätzung klinischer Experten, mehr als die Hälfte der Vergleiche mit menschlichen Klinikern übertrifft — mit dem Hinweis, dass es sich um eine Forschungsphase handelt, nicht um ein fertiges Medizinprodukt.