arXiv:2605.18703: EnvFactory – RL-Training von Tool-Use-Agenten mit 5× weniger Umgebungen

Was ist EnvFactory und warum ist es wichtig?

EnvFactory ist ein neues Framework zur automatischen Synthese ausführbarer Umgebungen, das für das Training von Tool-Use-Agenten entwickelt wurde — KI-Systemen, die lernen, externe Tools und APIs zu nutzen. Forscher mehrerer asiatischer Universitäten lösten zwei chronische Probleme in diesem Bereich: fehlende skalierbare Ausführungsumgebungen und zu wenige realistische Trainingsdaten, die implizites menschliches Denken widerspiegeln.

Das System erstellt und verifiziert stateful Tools aus authentischen Quellen autonom und generiert anschließend mehrstufige Trainingstrajektorien, die natürliche menschliche Anfragemuster widerspiegeln — einschließlich SFT (Supervised Fine-Tuning) und RL (Reinforcement Learning)-Trajektorien.

Wie wird der Erfolg gemessen?

Für die Evaluation werden zwei zentrale Benchmarks genutzt: BFCLv3 (Berkeley Function Calling Leaderboard v3), der misst, wie präzise ein Modell Funktionen und Tools in verschiedenen Szenarien aufruft, sowie MCP-Atlas, ein Testsatz für das Model Context Protocol — das standardisierte Protokoll zur Verbindung von KI-Agenten mit externen Diensten.

Auf der Qwen3-Modellserie erzielt EnvFactory +15 % auf BFCLv3 und +8,6 % auf MCP-Atlas. Konversations-Benchmarks τ²-Bench und VitaBench zeigen zusätzlich +6 %.

Fünffache Effizienz — ist das ein echter Fortschritt?

Was EnvFactory vom Wettbewerb unterscheidet, ist nicht nur die Genauigkeit, sondern die Effizienz: Es werden lediglich 85 verifizierte Umgebungen in 7 Domänen genutzt — rund 5× weniger als vergleichbare Ansätze — und daraus entstehen 2.575 Trainingstrajektorien. Topologiebewusstes Sampling und kalibrierte Trajektorien-Verfeinerung machen das Training robuster ohne exponentielles Datenwachstum. Für die Industrie bedeutet das: bessere Agenten bei geringeren Kosten für den Aufbau der Trainingsinfrastruktur.