arXiv:2605.15100 Dual-Dimensional Consistency: 10-fache Reduzierung des Token-Verbrauchs bei gleichbleibender Genauigkeit über fünf Benchmarks

Rongman Xu, Yifei Li, Tianzhe Zhao, Yanrui Wu, Bo Li und Hang Yan veröffentlichten am 14. Mai 2026 auf arXiv ein Paper, das einen der kostspieligsten Aspekte des Einsatzes von Frontier-LLMs adressiert — den Overhead beim Inference-Time-Scaling. Die These: Das Framework erzielt eine über 10-fache Reduzierung des Token-Verbrauchs bei gleichbleibender oder verbesserter Genauigkeit über fünf Benchmarks.

Was ist das Inference-Time-Scaling-Problem?

Frontier-Reasoning-Modelle (OpenAI o1, DeepSeek R1, GPT-5 Thinking Modes) nutzen Inference-Time-Scaling — sie generieren mehrere parallele Reasoning-Pfade und wählen die beste Antwort aus. Dieser Ansatz verbessert die Genauigkeit erheblich, erzeugt aber zwei kostspielige Dimensionen:

• Sampling-Breite — wie viele parallele Reasoning-Pfade
• Sampling-Tiefe — wie tief jeder Pfad geht

Der naive Ansatz multipliziert beide Dimensionen — 10 parallele × 10-fach länger = 100-facher Aufwand im Vergleich zu einem einzelnen Forward-Pass. Das muss in der Praxis offensichtlich reduziert werden — aber wie, ohne Genauigkeit einzubüßen?

Was bedeutet Dual-Dimensional Consistency konkret?

Die meisten bisherigen Ansätze adressieren die Dimensionen unabhängig: Entweder werden Pfade früh terminiert (Depth Pruning) oder die Anzahl der Äste wird reduziert (Width Pruning). Das Paper argumentiert, dass dies suboptimal ist, weil es zwei Fehlertypen auslöst:

• Width Consensus verstärkt Halluzinationen — wenn mehrere parallele Pfade dieselbe falsche Antwort halluzinieren, bestätigt naives Voting den Fehler
• Vorzeitiges Depth Pruning — aggressives Terminieren von Pfaden kann einen Track abschneiden, der kurz vor einem Durchbruch steht

Dual-Dimensional Consistency koppelt beide Dimensionen durch zwei Mechanismen:

• Confidence-Weighted-Bayesian-Protokoll — quantifiziert die Übereinstimmung zwischen parallelen Pfaden mit Konfidenzgewichten; Übereinstimmung muss wirklich informativ sein, nicht nur numerisch
• Trend-Aware Stratified Pruning — verfolgt die Trajektorie der Qualitätswerte über die Tiefe und beschneidet nur Äste, die stagnieren oder degradieren, während solche kurz vor einem Durchbruch erhalten bleiben

Welche Benchmark-Ergebnisse berichtet das Paper?

Das Team evaluiert den Ansatz über fünf Benchmarks mit verschiedenen LLM-Modellen — das Paper nennt „über 10-fache Token-Reduzierung” als Hauptmetrik neben „gleichbleibender oder verbesserter Genauigkeit gegenüber starken Baselines.” Konkrete Benchmark-Namen und numerische Details sind im aktuellen Abstract-Auszug nicht verfügbar, aber das vollständige Paper enthält eine detaillierte Evaluierungstabelle.

Praktische Implikationen: Wenn ein aktuelles Reasoning-Modell bei einem schwierigen Problem 100.000 Tokens pro Anfrage verbraucht, würde das Framework diese Zahl auf ca. 10.000 Tokens bei gleicher Genauigkeit reduzieren. Für Produktionssysteme, die Millionen von Anfragen verarbeiten, ist das der Unterschied zwischen $$ und $$$$ auf der monatlichen Rechnung.

Warum ist das für den Produktionseinsatz wichtig?

Inference-Time-Scaling ist typischerweise ein „erschwinglich im Labor, untragbar in der Produktion”-Feature. Frontier-Modelle bieten es als Premium-Tier an (OpenAI o1, Claude Opus Thinking Mode) mit höheren Token-Preisen. Operations-Ingenieure müssen Genauigkeit, Latenz und Kosten in einem Dreifach-Trade-off ausbalancieren.

Eine 10-fache Token-Reduzierung ändert die Gleichung:

• Kostendimension — wird für hochvolumige API-Dienste praktikabel
• Latenzdimension — kürzerer Reasoning-Trace = schnellere Antwortzeit
• Genauigkeitsdimension — gleichbleibend oder verbessert, also ein Ansatz „ohne Kompromisse”

Stellung in der Effizienz-Inference-Forschung

Das Paper fügt sich in die Welle effizienter Inference-Forschung von 2026 ein: arXiv FATE (12.5., Reduktion adversarieller Angriffe), GraphFlow formale Verifikation (15.5.), Microsoft AI Delegation Reliability (15.5.). Alle teilen ein gemeinsames Narrativ — KI-Produktionseinsatz braucht einen effizienten, zuverlässigen und transparenten Ansatz, kein Brute-Force-Scaling.

Anthropic Mythos Preview, OpenAI GPT-5.5, DeepSeek R2 — alle aktuellen Frontier-Initiativen suchen ebenfalls nach Wegen, Inference-Time-Compute effizient zu nutzen. Dual-Dimensional Consistency ist eines der ambitioniertesten aktuellen Paper in diesem Bereich aufgrund des 10-fachen Claims — eine Zahl, die, wenn sie in unabhängigen Evaluierungen reproduziert wird, in den nächsten 6–12 Monaten zu einer Standardkomponente des Produktions-Inference-Stacks werden könnte.