arXiv:2607.17641: VRR-Stop rješava kada LLM agent treba stati s ponavljanim popravljanjem svog odgovora

Zašto verify-repair petlja ponekad pogorša odgovor?

Yitao Wu i suradnici u radu “Verify, Repair, Repeat, or Stop? Robust Stopping for Noisy Verify-Repair Loops in LLM Agents” (arXiv:2607.17641) razmatraju čest obrazac kod LLM agenata: agent naizmjenično poziva verifiera, koji procjenjuje točnost trenutnog odgovora, i repairera, koji odgovor pokušava popraviti. Autori pokazuju paradoksalan nalaz — ako i verifier i repairer griješe s nezanemarivom vjerojatnošću, svaki dodatni krug petlje ne mora rezultat poboljšati, nego ga može i pogoršati, jer repairer može “popraviti” već ispravan odgovor u pogrešnom smjeru.

VRR-Stop: model šuma s 4 parametra i belief filtering

Kao rješenje, autori predlažu VRR-Stop, metodu koja ponašanje verifiera i repairera opisuje modelom šuma sa 4 parametra — stopama pogrešaka svakog od njih u oba smjera. Na temelju tog modela, belief filtering kontinuirano prati procijenjenu vjerojatnost da je trenutni odgovor točan i na osnovu nje odlučuje treba li agent nastaviti s još jednim krugom popravka ili stati. Uz to je definiran VRR-Guard, fallback mehanizam koji preuzima odluku u slučajevima kada procjena postane previše nesigurna za pouzdano nastavljanje.

VRR-Stop naspram fiksnih pet rundi popravka

Na matematičkim reasoning zadacima VRR-Stop postiže poboljšanje od 60,6 postotnih bodova u odnosu na uobičajen pristup fiksnih pet rundi verify-repair popravka, pri čemu fiksni pristup nastavlja petlju do unaprijed zadanog broja koraka bez obzira na to poboljšava li se odgovor. Autori naglašavaju da to poboljšanje dolazi uz samo minimalan dodatni računalni trošak u odnosu na fiksnu petlju, što VRR-Stop čini praktičnom zamjenom za agentske sustave koji se oslanjaju na iterativnu provjeru i popravak odgovora.