arXiv:2607.13104: opsežan pregled samopoboljšavajućih AI agenata (uz Jürgena Schmidhubera)

Tim istraživača predvođen Zheom Renom i Yimengom Chenom, uz sudjelovanje Jürgena Schmidhubera — pionira dubokog učenja poznatog po razvoju LSTM arhitekture — objavio je na arXivu sveobuhvatan pregled samopoboljšavajućih AI agenata. Studija broji 97 stranica i 12 figura, čineći je jednim od najopsežnijih akademskih pregleda tog polja do danas.

Što je samopoboljšavajući agent?

Rad formalizira samopoboljšavajući agent kao “update operator koji usvaja iskustvo bez ljudskog inputa” — AI sustav koji modificira vlastito ponašanje na temelju povratnih informacija iz okoline, bez ručnog ponovnog treniranja ili intervencije inženjera. Za razliku od standardnog fine-tuninga kojim upravlja čovjek, samopoboljšanje je autonoman proces: agent identificira pogreške, generira vlastite nagrade ili evaluacijske signale i ažurira sebe.

Što pregled pokriva?

Autori sistematiziraju polje prema trima dimenzijama. Prva su ciljevi ažuriranja — mijenjaju li se parametri samog modela ili samo scaffold, odnosno okvir koji ga okružuje (alati, memorija, promptovi). Druga su pokretački signali koji pokreću poboljšanje: vanjska nagrada, vlastita evaluacija, kontradikcija u kontekstu ili komparacija s prethodnim verzijama. Treća je evaluacija — kako izmjeriti je li agent zaista bolji, a ne samo drugačiji. Uz to pregled mapira tranziciju od istraživačkih prototipa prema sustavima deployanim u produkcijskom okruženju.

Zašto je uključenost Schmidhubera značajna?

Jürgen Schmidhuber desetljećima istražuje samoreferentne i samopoboljšavajuće sustave — taj je smjer postavio u radovima iz 1990-ih, godinama prije nego što je termin “agentic AI” ušao u mainstream. Njegovo sudjelovanje daje pregledu izravnu vezu s teorijskim temeljima polja, a 97-straničan format sugerira ambiciju postavljanja referentne točke za istraživače koji ulaze u ovaj brzorastuć segment.