arXiv:2605.20173: 6 arhitektonskih obrazaca za produkcijske LLM agente
Novi arXiv rad uvodi stochastic-deterministic boundary kao temeljni dizajn princip produkcijskih LLM agenata te definira 6 composable runtime obrazaca — od hijerarhijske delegacije do human-in-the-loop — koji se biraju prema tri arhitektonske brige: koordinaciji, stanju i kontroli.
Ovaj članak generiran je uz pomoć umjetne inteligencije na temelju primarnih izvora.
Izgradnja LLM agenta koji radi u laboratoriju relativno je laka. Izgradnja agenta koji pouzdano radi u produkciji — to je druga priča. Novi arXiv rad (Vasundra Srinivasan, 2605.20173) nudi prvu sustavnu metodologiju za tu razliku.
Što je stochastic-deterministic boundary?
Središnji uvid rada jest pojam stochastic-deterministic boundary (SDB) — crta između nedeterminističkog LLM zaključivanja i deterministički izvršenih sistemskih akcija. SDB funkcionira kao četverodijelni ugovor: proposer (LLM) predlaže akciju, verifier provjerava ispunjava li predefinirana pravila, commit step bilježi odluku kao neopozivU, a reject signal vraća kontrolu uz dijagnostičke informacije.
Bez eksplicitnog SDB-a sustav ne zna gdje stohastičnost završava, a odgovornost počinje — što je korijeni uzrok većine produkcijskih incidenata.
Zašto arhitektonski obrazac postaje važniji što je model bolji?
Rad demistificira pouzdanost na dvije komponente: per-call model variance i architectural momentum. Kontraintuitivni zaključak: kako modeli postaju točniji, izbor arhitektonskog obrasca postaje proporcijalno kritičniji. Manji šum modela znači da sustavni propusti u koordinaciji i kontroli dominiraju ukupnom stopom grešaka.
Six composable obrazaca organizirani su prema tri brige — koordinacija, stanje i kontrola — i mogu se kombinirati. Referentna implementacija prikazuje 90-dnevni contract-renewal agent koji kombinira scatter-gather plus saga s human-in-the-loop gatom.
Replay divergence: tiha greška koja ruši audit trail
Posebno vrijedno upozorenje: replay divergence, situacija u kojoj isti deterministički event log daje različite outpute nakon ažuriranja modela ili izmjene prompta. U reguliranim industrijama (financije, pravo, zdravstvo) to može invalidirati cijeli audit trail retroaktivno.
Rad nudi dijagnostičke procedure za atribuciju grešaka i peterokorišnu metodologiju odabira obrasca. Za timove koji prelaze s prototipa na produkciju — obavezno štivo.
Česta pitanja
- Što je stochastic-deterministic boundary?
- To je četverodijelni ugovor između proposera, verifikatora, commit koraka i reject signala koji određuje kada i kako LLM output postaje irreverzibilna sistemska akcija.
- Koji su 6 runtime obrazaca iz rada?
- Hijerarhijska delegacija, scatter-gather plus saga, event-driven sequencing, shared state machine, supervisor plus gate i human-in-the-loop — svaki adresira drugu kombinaciju koordinacije, stanja i kontrole.
- Što je replay divergence i zašto je opasan?
- Greška u kojoj agent koji troši deterministički event log producira nekonzistentne outpute nakon promjene modela ili prompta — ozbiljan problem za audit, compliance i reproducibilnost u produkcijskim sustavima.