arXiv:2606.14350 — 8 Entwurfsmuster für komplexe KI-Systeme: bis zu 71 % niedrigere Kosten

Monolithische Modelle verlieren an Flexibilität

Ein einziges großes Sprachmodell, das in der Entwurfsphase ausgewählt wird, kann sein Verhalten nicht leicht an die Komplexität der Eingabeaufgabe anpassen, noch kann es die Arbeit zwischen spezialisierten Komponenten verteilen. Das ist der Ausgangspunkt der Arbeit der Forscher Miloš Gravara, Andrija Stanisić und Stefan Nastić von der TU Wien, die eine systematische Methodik für den Entwurf komplexer (Compound) KI-Systeme vorschlagen, die mehrere Modelle, Algorithmen und Tools durch explizite Steuerungslogik orchestrieren.

Das Argument ist nicht nur theoretisch. Mit wachsender Komplexität produktiver KI-Systeme führt das ad-hoc-Hinzufügen von Komponenten ohne formalen Rahmen zu suboptimalen Konfigurationen und unvorhersehbaren Kompromissen zwischen Latenz, Genauigkeit und Kosten.

Wie groß ist der tatsächliche Leistungsunterschied zwischen Compound- und monolithischen Systemen?

Ergebnisse aus drei empirischen Fallstudien geben eine konkrete Antwort. Komplexe Konfigurationen erreichten die Genauigkeit monolithischer Modelle innerhalb eines Bereichs von 2,5 bis 4 Prozentpunkten — bei gleichzeitig bis zu 60 % geringerer Latenz und bis zu 71 % niedrigeren Kosten. Es handelt sich um messbare Kompromisse, die über verschiedene Aufgabentypen konsistent sind, was den Compound-Ansatz wirtschaftlich attraktiv für nahezu alle produktiven Anwendungsfälle macht, bei denen absolute maximale Genauigkeit nicht das einzige Auswahlkriterium ist.

Zwei Freiheitsgrade, acht Muster

Die Methodik organisiert den Designraum entlang zweier Freiheitsgrade: Workflow-Topologie (workflow topology) und Konfigurationsauswahl (configuration selection). Durch Kombination dieser Dimensionen identifizieren die Autoren 8 Entwurfsmuster, die spezifische Defizite des klassischen Einzel-Modell-Ansatzes adressieren.

Die Muster umfassen Kettenkonfigurationen, bei denen ein sequenzieller Fluss durch spezialisierte Komponenten verläuft, die jeweils für eine Teilaufgabe optimiert sind. Router (Routers) leiten Aufgaben dynamisch basierend auf geschätzter Komplexität oder Eingabeart um. Ensembles und Kritiker kombinieren parallele Ausführung mit anschließender Bewertung oder Abstimmung zwischen den Ausgaben mehrerer Modelle. Jedes Muster trägt explizit dokumentierte Kompromisse, die eine systematische Architekturauswahl anstelle von intuitivem Raten ermöglichen.

Die zentrale Spannung: Modell- und Konfigurationsauswahl gemeinsam

Die Autoren betonen, dass Modellauswahl und Konfigurationsparameter gemeinsam die Systemleistung bestimmen. Diese Erkenntnis klingt trivial, hat aber ernsthafte Engineering-Konsequenzen: Mit zunehmender Anzahl von Komponenten wächst der Raum möglicher Konfigurationen kombinatorisch, was manuelles Tuning in produktiven Umgebungen mit hohen SLO-Anforderungen unpraktikabel macht.

Genau diese kombinatorische Explosion motiviert die formalisierte Methodik. Ohne strukturierten Suchraum verlassen sich Ingenieure auf Erfahrung und Ad-hoc-Experimente, was zu Konfigurationen führt, die zwar funktionieren, aber weit von optimal für gegebene Einschränkungen entfernt sind.

Fünf offene Herausforderungen

Die Arbeit schließt mit der Identifizierung von fünf offenen Herausforderungen, die zukünftige Forschung leiten. Die anspruchsvollste ist die automatische Entdeckung von Konfigurationen, die den Service Level Objectives entsprechen — Mechanismen, die autonom Kombinationen aus Komponenten, Parametern und Topologien finden würden, die Latenz-, Kosten- und Genauigkeitsanforderungen ohne manuellen Eingriff erfüllen.

Weitere Herausforderungen umfassen das Management der Laufzeitadaption (dynamische Konfigurationsänderung während der Ausführung gemäß variierender Eingabeschwierigkeit), standardisierte Evaluierung verschiedener Compound-Architekturen und formale SLO-Konformitätsgarantien in verteilten Umgebungen. Diese offenen Probleme zeichnen die Grenze zwischen heutigen heuristischen Lösungen und systematischem KI-Infrastruktur-Engineering.

Warum dies jetzt wichtig ist

Das „Compound-AI”-Paradigma — Ketten, Router, Ensembles, Kritiker — wird rasch zur dominanten Architektur in produktiven KI-Systemen. Tools wie LangChain, DSPy oder LlamaIndex implementieren bereits viele dieser Muster, aber ohne formalen Rahmen für Design und Evaluierung, der vorhersehbare Kompromisse sicherstellt.

Die Arbeit von Gravara und Kollegen macht einen Schritt hin zu diszipliniertem Engineering komplexer KI-Systeme — mit messbaren, reproduzierbaren Kompromissen statt Raten. Für Produktionsteams, die heute zwischen monolithischen und Compound-Ansätzen wählen, bieten diese 8 Muster und drei konkrete Messungen eine seltene empirische Grundlage für solche Entscheidungen.