arXiv:2605.18703：EnvFactory — 환경 수 1/5로 도구 사용 에이전트 성능 15% 향상

EnvFactory는 무엇이며 왜 중요한가요?

EnvFactory는 도구 사용 에이전트 — 외부 도구와 API 사용을 학습하는 AI 시스템 — 훈련을 목적으로 한 실행 가능 환경의 자동 합성을 위한 새로운 프레임워크입니다. 여러 아시아 대학의 연구자들이 이 분야의 두 가지 만성적인 문제를 해결했습니다. 확장 가능한 실행 환경의 부족과 인간의 암묵적인 사고 패턴을 반영한 실제 훈련 데이터의 부족입니다.

시스템은 실제 소스에서 상태 저장 도구를 자율적으로 생성 및 검증하고, SFT(지도 학습 파인튜닝)와 RL(강화학습) 궤적을 포함하여 인간의 자연스러운 쿼리 패턴을 반영하는 다단계 훈련 궤적을 생성합니다.

성공은 어떻게 측정되나요?

평가에는 두 가지 핵심 벤치마크를 사용합니다. BFCLv3(버클리 함수 호출 리더보드 v3) — 다양한 시나리오에서 함수와 도구를 정확하게 호출하는 모델의 능력 측정 — 과 MCP-Atlas — AI 에이전트를 외부 서비스에 연결하는 표준화된 프로토콜인 Model Context Protocol에 초점을 맞춘 테스트 세트입니다.

Qwen3 시리즈 모델에서 EnvFactory는 BFCLv3에서 +15%, MCP-Atlas에서 **+8.6%**를 달성했습니다. 대화 벤치마크 τ²-Bench와 VitaBench에서는 추가로 **+6%**를 기록했습니다.

5배 효율성 — 이것이 진정한 혁신인가요?

EnvFactory를 경쟁 방법과 구별하는 것은 정확도만이 아니라 효율성입니다. 7개 도메인에 걸쳐 85개의 검증된 환경만을 사용하며, 이는 동류 방법의 약 1/5에 해당합니다. 여기서 2,575개의 훈련 궤적이 생성됩니다. 토폴로지 인식 샘플링과 교정된 궤적 정제로 데이터의 기하급수적 증가 없이 훈련이 더욱 견고해집니다. 업계에 대한 의미는 다음과 같습니다. 더 나은 에이전트, 더 낮은 훈련 인프라 비용입니다.