arXiv:2607.11185: SCALECUA skalira computer-use agente uz RL — 68,7% na OSWorldu

Što su computer-use agenti i što je RL?

Computer-use agent je AI sustav koji samostalno upravlja računalom kroz grafičko korisničko sučelje — izvodi klikove, tipkanje i navigaciju ekranom onako kako bi to radio čovjek, bez API pristupa ili posebnih programskih sučelja. Reinforcement learning (RL) je metoda strojnog učenja u kojoj model uči kroz pokušaj i pogrešku: prima nagradu kad uspješno završi zadatak, a kaznu kad ne uspije. Kombinacija ovih dvaju pristupa — RL treniranje computer-use agenata — do sada je bila ograničena nedostatkom provjerljivih zadataka za treniranje.

SCALECUA: arhitektura i ključni rezultati

Istraživači sa Sveučilišta Tsinghua i laboratorija THUDM objavili su SCALECUA (Scaling Computer Use Agents with Verifiable Task Synthesis and Efficient Online RL), okvir koji adresira upravo taj problem. Sustav je postigao 68,7% točnosti na OSWorld benchmarku — standardnom mjerilu za evaluaciju computer-use agenata na realnim zadacima operacijskog sustava — i 54,0% na ScienceBoard, koji pokriva složenije znanstvene zadatke. Oba rezultata predstavljaju novi SOTA (state-of-the-art), odnosno dosad najbolje objavljene performanse za ovu kategoriju AI sustava. Za usporedbu, prethodni vodeći modeli postizali su ispod 60% na OSWorldu, što znači da SCALECUA donosi mjerljivi pomak od više od 8 postotnih bodova.

VeriGen: 24.000+ provjerljivih zadataka za RL treniranje

Središnji doprinos rada je VeriGen sustav koji automatski generira provjerljive zadatke za RL treniranje. Istraživači su uz njegovu pomoć sintetizirali više od 24.000 provjerljivih zadataka i iz njih filtrirali ~3.000 visokokvalitetnih RL zadataka. Ključna prednost provjerljivosti je u tome što agent odmah dobiva jasnu nagradu — zadatak je ili završen ili nije, bez potrebe za skupom ljudskom evaluacijom.

Efikasnost treniranja i skalabilnost

SCALECUA uvodi i Visual Context Segmentation — mehanizam koji modelu pomaže fokusirati pažnju na relevantne dijelove ekrana, smanjujući računalni teret. Rezultat je 2,83× ubrzanje treniranja u usporedbi s naivnim pristupom. Sustav je dizajniran za skaliranje na više od 100 paralelnih agent workera, što ga čini primjenjivim u distribuiranim računalnim okruženjima i otvara put prema daljnjem povećanju skupa zadataka za RL.