arXiv: Model vrijednosti memorije za AI agente — sedam psiholoških faktora koji odlučuju što treba zapamtiti

Zašto je memorija dugoročnih AI agenata težak problem?

AI agenti koji rade na dugoročnim zadacima suočavaju se s fundamentalnim problemom upravljanja memorijom: uz ograničen memorijski budžet, što treba enkodirati duboko, što zaboraviti i što dohvatiti kada zatreba? Dosadašnja rješenja oslanjala su se uglavnom na semantičku sličnost ili recenciju — jednostavne heuristike koje loše rješavaju odluku o zaboravljanju, donošenu u trenutku kada budući upiti još nisu poznati.

Istraživanje „Learning What to Remember” nudi sustavniji odgovor: funkciju vrijednosti memorije temeljenu na sedam faktora inspiriranih kognitivnom psihologijom (cognitive psychology), s težinama koje agent sam uči.

Sedam faktora koji određuju vrijednost uspomene

Centralna inovacija je funkcija vrijednosti V(m) = Σ wᵢfᵢ(m), gdje svaki faktor fᵢ kvantificira jednu dimenziju važnosti pojedinog memorijskog zapisa:

1. Emocionalna intenzivnost — koliko je snažan afektivni sadržaj zapisa
2. Relevantnost ciljeva — koliko je zapis vezan uz tekuće ciljeve agenta
3. Usklađenost s vrijednostima — konzistentnost s normativnim okvirom agenta
4. Relevantnost za sebe/korisnika — odnosi li se zapis na agenta ili korisnika direktno
5. Korisnost za zadatak — praktična primjenjivost u budućim zadacima
6. Pouzdanost — povjerljivost i provjerljivost informacije
7. Povijest korištenja — koliko je često i uspješno zapis već dohvaćan

Jedan skalarni parametar kontrolira istovremeno dubinu enkodiranja, rizik od zaboravljanja i rang pri dohvatu — što pojednostavljuje optimizaciju i primjenu.

Učenje težina faktora bez gradijenta

Metoda namjerno izbjegava gradijentne postupke (gradient-free optimization), što znači da cijeli sustav može raditi na jednostrukom CPU-u bez API poziva. Težine se uče iz ishoda koje agent postiže na stvarnim zadacima, bez potrebe za skupim anotiranjem ili specijaliziranim hardverom.

Takav pristup ima praktičnu prednost: kompatibilan je s otvorenim modelima i može se primijeniti u okruženjima s ograničenim resursima, što je važno za realne primjene dugoročnih agenata.

Mjerni rezultati na LongMemEval

Evaluacija se provodi na LongMemEval benchmarku u slijepom režimu (blind regime) — ključnom distinkcijom od lakšeg načina testiranja. U slijepom režimu, odluka što zapamtiti donosi se bez znanja o budućem upitu za evaluaciju, što realistično simulira stvarnu upotrebu agenta.

Rezultati su jasni:

Pristup	Retencija zlatnih dokaza
Naučeni model (V(m))	0,770
Uniformne težine	0,657
Najbolji pojedinačni faktor	0,518
Recencija	0,368

Naučeni model nadmašuje sve alternative. Posebno je ilustrativan jaz između naučenog modela (0,770) i pukog oslanjanja na recenciju (0,368) — gotovo dvostruka razlika — što kvantificira koliko recencija kao heuristika zapravo propušta.

Najvažniji faktori vrijednosti

Analiza naučenih težina otkriva da pouzdanost, emocionalna intenzivnost i relevantnost za sebe/korisnika dominiraju u performansi. Interesantno, semantička sličnost s ciljevima u trenutku upita namjerno je nisko ponderirana za odluku o zaboravljanju — logična odluka, jer se zaboravlja prije nego što je budući upit poznat.

Metodološka zamka vidljivog upita

Istraživači uključuju i metodološku kritiku koja vrijedi za širu zajednicu: testiranje dohvata memorije kada je evaluacijski upit vidljiv zasićuje oko 0,98 i mjeri sposobnost dohvata, ne sposobnost zaboravljanja. To je bitno različita sposobnost. Slijepi režim jedini realistično testira ono što je zapravo važno za dugoročnog agenta — donošenje dobre odluke o tome što sačuvati u trenutku kada budući kontekst još nije poznat.

Statistička validacija potvrđuje sve razlike u performansi: 95-postotni bootstrap intervali pouzdanosti iznad nule za sve usporedbe. Istraživanje je u potpunosti ponovljivo s otvorenim izvornim kodom i bez vlasničkih API-ja.