Dva AI mjerila razišla se — hoće li to biti odlučujuće?
Istraživači s MIT-a i Northwestern-a dokazuju da zaključak o demokratizaciji ili koncentraciji AI sposobnosti u potpunosti ovisi o tome koji benchmark koristite — a ne o samom stanju tehnologije.
Ovaj članak generiran je uz pomoć umjetne inteligencije na temelju primarnih izvora.
Hoće li najmoćniji AI sustavi ostati rezervirani za bogate korporacije i vlade, ili će s vremenom postati dostupni svima? To je jedno od temeljnih policy pitanja modernog AI razvoja — i prema novom istraživanju, odgovor nije ni „da” ni „ne”. Odgovor je: ovisi o tome što mjerite.
Rad „Two AI Metrics Diverged: Will it Make All the Difference?” autora Alexa Fogelisona, Zacharyja Browna, Hansa Gundlacha, Jaysona Lyncha i Neila Thompsona s MIT-a i Northwestern Sveučilišta, prihvaćen na ICML 2026 Technical AI Governance Research Workshop, nudi matematičku analizu koja ima dalekosežne implikacije za regulatore, istraživače i sve koji pokušavaju predvidjeti budućnost AI-ja.
Može li ista tehnologija istovremeno demokratizirati i koncentrirati sposobnosti?
Odgovor istraživača je nedvosmislen: može, i upravo to se događa — ovisno o tome koji benchmark pogledate.
Validation loss, standardna mjera pogreške modela koja se koristi svakodnevno u AI istraživanjima, pokazuje konvergenciju između manjih i većih modela kako računalni resursi rastu. Manji modeli sustižu veće. To je signal koji favorizira narativ demokratizacije — argument da će napredni AI biti sve dostupniji širem broju aktera.
Međutim, drugi skupovi mjera sposobnosti — benchmarci koji testiraju konkretne zadatke poput programiranja, rezoniranja ili persuazivnog pisanja — pokazuju divergenciju. Frontier modeli, onakvi kakvi se razvijaju u velikim laboratorijima s milijardama dolara compute-a, ne samo da prate manji, nego sve više povećavaju prednost.
Oba nalaza vrijede istovremeno. Paradoks nije slučajan — on proizlazi iz matematičke strukture samih metrika.
Taksonomija metrika: ograničene nasuprot neograničenih
Središnji doprinos rada jest formalna matematička taksonomija mjernih alata prema njihovom funkcionalnom obliku u odnosu na trošak računanja.
Autori dokazuju da ograničene (bounded) metrike — one koje imaju matematički gornji strop — dosljedno favoriziraju pristupačnost. Kad veliki modeli dosegnu blizu maksimalne vrijednosti, manji modeli mogu ih pratiti uz dramatično manje resursa. Validation loss je takva mjera.
S druge strane, neograničene metrike — one koje mogu rasti bez gornje granice — favoriziraju koncentraciju kod aktera s ogromnim resursima. Dok jedan model postigne rezultat 100 na nekom benchmarku, drugi s više resursa može postići 1.000 ili 10.000. Jaz se ne smanjuje, nego raste.
Ovo nije puka teorijska zanimljivost. Izbor benchmarka u evaluacijskim izvještajima, regulatornim prijedlozima i javnim studijama izravno određuje koji zaključak dobivate — čak i kad gledate iste modele na istim zadacima.
Policy implikacije: debata je dijelom artefakt mjerenja
Istraživači posebno naglašavaju domene poput softverskog inženjerstva, sintetičke biologije i retoričke persuazivnosti kao primjere gdje isti napredak frontierskih modela može izgledati kao demokratizacija ili koncentracija — ovisno o tome je li relevantna sposobnost u toj domeni matematički ograničena ili ne.
To ima direktne implikacije za regulatore koji izrađuju policy na temelju „je li AI sposobnost dostupna malim akterima”. Ako koristite bounded metriku, zaključit ćete da jest. Ako koristite unbounded metriku, zaključit ćete suprotno.
Debate o demokratizaciji vs. koncentraciji AI-ja dijelom su artefakt mjernog instrumenta, a ne odraz stvarnog stanja tehnologije.
Rad poziva istraživačku zajednicu da pri donošenju policy zaključaka eksplicitno identificira funkcionalni oblik korištenih metrika — i da bude svjesna da benchmark koji je prikladan za usporedbu modela unutar laboratorija možda nije prikladan za predviđanje društvenih ishoda AI razvoja.
Za istraživače i policy makere koji prate AI regulaciju, ovo je argument da se nijedan pojedinačni benchmark ne smije koristiti kao jedini pokazatelj pri donošenju odluka o pristupačnosti ili koncentraciji sposobnosti — jer se iza svakog takvog zaključka krije matematička pretpostavka koja može biti potpuno drugačija od intuicije.
Česta pitanja
- Što je validation loss i zašto je važan za ovu debatu?
- Validation loss je standardna mjera pogreške modela tijekom treniranja. Prema ovom radu, validation loss pokazuje konvergenciju između manjih i većih modela — što bi upućivalo na demokratizaciju AI sposobnosti.
- Zašto ograničene metrike favoriziraju pristupačnost?
- Ograničene metrike imaju gornji strop postignutih vrijednosti. Kad veliki modeli dosegnu blizu tog stropa, manji modeli ih mogu pratiti uz mnogo manje resursa — matematički uvjet koji autori formalno dokazuju.
- Koje domene mogu imati suprotne zaključke ovisno o odabiru metrike?
- Autori navode softversko inženjerstvo, sintetičku biologiju i retoričku persuazivnost kao primjere gdje izbor bounded nasuprot unbounded metrike može dovesti do potpuno suprotnih policy zaključaka.
Povezane vijesti
IBM: Wimbledon 2026 dobiva AI osobnog vodiča za gledatelje i modernizirane digitalne platforme
arXiv:2606.20205: psihološki profili jezičnih modela uglavnom su mjerni artefakt, a ne stabilna osobnost
arXiv: AI kao skriveni treći — studija o romantičnoj komunikaciji uz pomoć ChatGPT-a