arXiv:2605.11814 MedMemoryBench deckt Memory-Sättigung in medizinischen Agenten auf — 2.000 Sitzungen, 16.000 Turns

Yihao Wang, Haoran Xu, Renjie Gu, Yixuan Ye, Xinyi Chen, Xinyu Mu und Mitarbeiter haben am 12. Mai 2026 MedMemoryBench veröffentlicht — den ersten systematischen Benchmark für Gedächtnismechanismen in personalisierten Healthcare-KI-Agenten. Die Studie zeigt, dass Mainstream-Architekturen in risikoreichen medizinischen Szenarien erhebliche Engpässe aufweisen.

Welche Lücke füllt MedMemoryBench?

Bestehende Agent-Memory-Benchmarks konzentrieren sich auf Alltagsgespräche und erfassen nicht die Komplexität realer medizinischer Anwendungen. Das Healthcare-Szenario stellt spezifische Anforderungen — das Behalten von Therapieprotokollen über Wochen, die Integration von Laborbefunden, die Verfolgung von Kontraindikationen und den Kontext der Krankengeschichte eines Patienten. MedMemoryBench baut einen Datensatz rund um diese Herausforderungen mit rund 2.000 Sitzungen und 16.000 Interaktions-Turns durch eine Human-Agent-Collaborative-Pipeline mit klinisch fundierten synthetischen Patientenprofilen auf.

Was ist Memory-Sättigung?

Der Hauptbefund der Studie ist das Phänomen der „Memory-Sättigung” — ab einem bestimmten Punkt verschlechtert ein kontinuierlicher Informationszufluss die Leistung, anstatt sie zu steigern. Der Agent scheitert daran, ein Signal aus der angehäuften Geschichte zu extrahieren, was beim medizinischen Reasoning die Präzision direkt senkt. Die Sättigung zeigt, dass klassische KI-Gedächtnisarchitekturen (RAG, Vektorspeicher, Sliding Window) keinen Mechanismus zur Priorisierung oder Komprimierung in risikoreichen Domänen besitzen.

Wie unterscheidet sich das Evaluate-while-Constructing-Protokoll?

Das neue „Streaming Assessment Protocol” ahmt Produktionssysteme nach, in denen der Speicher während der Nutzung wächst, statt der klassischen statischen Evaluierung, bei der das gesamte Gedächtnis vor dem Test eingerichtet wird. Das Protokoll ermöglicht die Verfolgung von Leistungseinbußen über die Zeit und die Identifizierung des Sättigungspunkts.

Das umfassende Benchmarking zeigt, dass Mainstream-Architekturen erhebliche Engpässe in der medizinischen Reasoning-Komplexität und der Robustheit gegenüber verrauschten Daten aufweisen — was auf den Bedarf an domänenspezifischem KI-Gedächtnisdesign hindeutet, wenn Healthcare-Agenten ein produktionsreifes Niveau erreichen sollen.