arXiv:2606.08048: PoE-Bridge ubrzava difuzijske jezične modele 5× paralelnim dekodiranjem

arXiv je 6. lipnja 2026. objavio rad (oznaka arXiv:2606.08048, verzija v1) koji uvodi PoE-Bridge, dekodirni okvir za znatno brže generiranje teksta. Metoda spaja dvije obitelji jezičnih modela kako bi iskoristila brzinu jedne i kvalitetu druge.

Koji problem PoE-Bridge rješava?

Difuzijski jezični modeli (DLM) obećavaju brzo, paralelno generiranje, ali im kvaliteta često zaostaje za autoregresivnim modelima (AR), koji žetone proizvode jedan po jedan i postižu vrhunsku točnost. Razvojni je izazov spojiti brzinu prvih s kvalitetom drugih.

PoE-Bridge premošćuje upravo taj jaz. Umjesto da bira između brzog i kvalitetnog pristupa, okvir ih kombinira tako da rezultat zadrži većinu kvalitete autoregresivnog modela, a dobije znatno na brzini.

Kako radi Product-of-Experts distribucija?

Srž metode je premošćivanje difuzijskih i autoregresivnih modela kroz Product-of-Experts intermedijalnu distribuciju. Product-of-Experts (umnožak stručnjaka) je tehnika u kojoj se izlazi više modela kombiniraju množenjem vjerojatnosti, čime se zadržavaju samo prijedlozi koji su uvjerljivi za sve sudionike.

U PoE-Bridge ta posredna distribucija povezuje difuzijski i autoregresivni model tako da difuzijski dio nudi brze, paralelne prijedloge, a autoregresivni dio osigurava da konačni izlaz ostane visoke kvalitete.

Kako teče paralelno dekodiranje?

Metoda radi paralelni drafting (istovremeno predlaganje više žetona) s rejection samplingom (uzorkovanjem s odbacivanjem), nakon čega slijedi importance-sampling korekcija. Tim se redoslijedom prvo brzo generira skup kandidata, zatim se odbacuju oni koji ne odgovaraju ciljnoj distribuciji, a na kraju se preostali rezultati statistički ispravljaju.

Takav postupak omogućuje da se više žetona obradi odjednom umjesto strogo redom. Time se dobiva ubrzanje karakteristično za difuzijske modele, ali bez napuštanja kvalitete kakvu daje autoregresivno generiranje.

Koliko je metoda brža i točnija?

Prema radu, PoE-Bridge postiže 5× ubrzanje nad standardnim DLM dekodiranjem. Pritom oporavlja najmanje 95% performansi ciljanog autoregresivnog modela, što znači da je velik dobitak u brzini praćen tek malim gubitkom kvalitete.

Taj omjer čini metodu privlačnom za primjene u kojima je važna i propusnost i točnost. Korisnici dobivaju brže odgovore, a da pritom ne moraju značajno žrtvovati pouzdanost rezultata.

Na kojim se zadacima PoE-Bridge ističe?

Rad navodi znatan napredak na zadacima matematičkog rasuđivanja i kodiranja. To su domene u kojima i mali pomaci u slijedu žetona mogu pokvariti konačni rezultat, pa je očuvanje 95% performansi posebno vrijedno.

Upravo zato je rezultat zanimljiv za razvoj modela usmjerenih na složeno rasuđivanje. PoE-Bridge pokazuje da se difuzijski pristup može iskoristiti i u zahtjevnim, preciznosti osjetljivim zadacima, a ne samo u jednostavnom generiranju teksta.