arXiv:2607.08173: 'Overthinking' — Verstärktes Schlussfolgern zwingt Reasoning-Modelle zur Preisgabe gelernter Geheimnisse, neuer Extraktionsangriff auf der ICML 2026

Das Paper „Overthinking: Extracting Learned Secrets” (arXiv:2607.08173) von Hopkins, Khullar und Roger wurde auf der ICML 2026 akzeptiert und beschreibt eine neue Klasse von Angriffen auf Reasoning-Modelle. Ein Reasoning-Modell ist ein Sprachmodell, das vor seiner endgültigen Antwort eine verlängerte interne Gedankenkette durchläuft — ein Mechanismus, der die Genauigkeit bei komplexen Aufgaben erhöht, aber, wie das Paper zeigt, auch einen unerwarteten Sicherheitskanal öffnet.

Was ist der Angriff?

Die Autoren zeigen, dass durch gezielte Verstärkung des „Reasoning-Gewichts” das Modell dazu gebracht werden kann, in seiner Gedankenkette Informationen preiszugeben, die es während des Trainings gelernt hat, im normalen Betrieb jedoch nicht offenbart. Mit anderen Worten: Je mehr ein Modell „denkt”, desto größer ist die Wahrscheinlichkeit, dass es dabei latent gespeicherte Geheimnisse unbeabsichtigt preisgibt — von Fragmenten der Trainingsdaten bis hin zu internen Anweisungen.

Warum ist das Paradox gefährlich?

Verlängertes Schlussfolgern ist die Vorzeigestärke der neuen Modellgeneration — OpenAIs o-Serie, DeepSeek R1 und Claude mit erweitertem Denken. Genau dieser Mechanismus, für den der Markt einen Aufpreis zahlt, wird durch Overthinking zur Schwachstelle: Eine Abwehrmaßnahme, die Informationslecks einschränkt, könnte gleichzeitig das nützliche Schlussfolgern schwächen. Dies stellt Teams, die Reasoning-Modelle im Produktionsbetrieb einsetzen, vor einen konkreten Zielkonflikt.

Kontext

Die Annahme auf der ICML 2026, einer der drei renommiertesten KI-Konferenzen, verleiht dem Befund mehr Gewicht als einem typischen Preprint. Das Paper erscheint am selben Tag, an dem GitHub die Erkennung von Prompt-Injection in CodeQL einführt — gemeinsam zeigen sie, wie sich die Sicherheitsforschung 2026 zunehmend auf Angriffe konzentriert, die auf die Modelle selbst abzielen, nicht nur auf die sie umgebenden Anwendungen. Für Betreiber von Reasoning-Modellen ist die Botschaft klar: Tieferes Denken erfordert auch tiefere Kontrolle darüber, was das Modell preisgeben darf.