arXiv:2604.21764: 'Thinking with Reasoning Skills' reduziert Reasoning-Token bei höherer Genauigkeit — ACL 2026 Industry Track

Das Team von Guangxiang Zhao, Qilong Shi, Xusen Xiao, Xiangzheng Zhang, Tong Yang und Lin Sun veröffentlichte am 23. April 2026 auf ArXiv das Paper „Thinking with Reasoning Skills: Fewer Tokens, More Accuracy” (arXiv:2604.21764). Das Paper wurde auf dem 64. ACL — Association for Computational Linguistics — Industry Track angenommen, der im Rahmen der Konferenz ACL 2026 stattfindet.

Welches Problem löst das Paper?

Moderne Reasoning-KI-Modelle (Modelle wie OpenAI o1, DeepSeek R1, Claude Opus mit Thinking-Modus) erzielen hohe Genauigkeit bei komplexen Aufgaben, indem sie lange Chain-of-Thought (CoT)-Traces generieren — internes Schritt-für-Schritt-Denken, das typischerweise Hunderte oder Tausende von Token verbraucht, bevor eine endgültige Antwort gegeben wird. Das Problem ist, dass das Modell „substantial tokens on long intermediate reasoning traces when solving new problems” verbraucht, was sowohl die Kosten pro Anfrage als auch die Latenz dramatisch erhöht. Für den Produktionseinsatz ist dies eine ernste wirtschaftliche Barriere — z. B. kann eine einzelne Reasoning-Anfrage 10× mehr kosten als eine Standard-Completion.

Was ist die Lösung?

Die Autoren schlagen einen grundlegenden Paradigmenwechsel vor: Anstatt Reasoning from Scratch (bei jeder Anfrage von null anfangen) schlagen sie vor, „reusable reasoning skills distilled from extensive deliberation and trial-and-error exploration” zusammenzufassen und zu speichern. Die Idee ist, dass nach der einmaligen Lösung eines Problems mit langem CoT eine kompakte ‘Skill’ extrahiert wird, die die wesentlichen Reasoning-Schritte zusammenfasst. Diese Skills werden in einem Repository gespeichert, und bei einer neuen Anfrage ruft das System zunächst relevante Skills ab und nutzt sie als Leitfaden: „helping the model avoid redundant detours and focus on effective solution paths”.

Strukturiertes vs. freies Reasoning

Der Unterschied zum klassischen CoT besteht darin, dass freies Reasoning immer von Null beginnt und alle möglichen Ansätze erkundet — einschließlich derer, die nirgendwohin führen. Strukturiertes Reasoning, geleitet durch destillierte Skills, wirkt als „erfahrungsbasierte Abkürzung”: Das Modell erhält eine Zusammenfassung vergangener Erfolge und kann diese sofort anwenden. Dies ist konzeptuell nahe an Case-Based-Reasoning-Ansätzen aus der klassischen KI-Literatur, aber angewendet im Kontext von retrieval-augmented LLM-Inferenz.

Welche konkreten Ergebnisse gibt es?

Die Autoren testen das Paper auf Coding- und Mathematik-Reasoning-Aufgaben. Das Abstract gibt an, dass der Ansatz „significantly reduces reasoning tokens while improving overall performance” — konkrete Prozentsätze der Token-Reduktion und Genauigkeitssteigerung befinden sich im Haupttext des Papers und nicht im öffentlichen Abstract. Die wirtschaftliche Implikation ist klar: „The resulting lower per-request cost indicates strong practical and economic potential for real-world deployment”.

Warum ist das Paper für die Industrie wichtig?

Die Annahme auf dem ACL Industry Track signalisiert, dass Peer-Reviewer die Arbeit als produktionsreif und nicht nur akademisch interessant betrachten. Für Unternehmen, die Reasoning-Modelle über API bedienen (OpenAI, Anthropic, Google, DeepSeek), kann dieser Ansatz die Gewinnmargen ernsthaft beeinflussen — weniger Token pro Anfrage bedeutet günstigere Betriebskosten oder ein besseres Preis-Leistungs-Verhältnis. In einer Zeit, in der ein Reasoning-Modell 10× mehr Token als ein normales Modell verbrauchen kann, stellen selbst 30–40 % Reduktion Millionenersparnisse für Hyperscaler dar, die monatlich Milliarden von Anfragen verarbeiten.