Google Research: Vantage — AI platforma koja procjenjuje kritičko mišljenje i kreativnost kroz razgovor s avatarima
Zašto je bitno
Google Research u suradnji s NYU predstavlja Vantage, eksperimentalnu platformu koja koristi generativni AI za procjenu teško mjerljivih ljudskih vještina poput kritičkog mišljenja i kreativnosti. AI ocjenjivanje pokazalo je podudarnost s ljudskim stručnjacima.
Google Research i Sveučilište u New Yorku (NYU) razvili su Vantage, inovativnu platformu koja koristi generativni AI za procjenu vještina koje su tradicionalno gotovo nemoguće objektivno mjeriti — kritičko mišljenje, suradnja i kreativnost.
Kako Vantage radi
Sustav postavlja učenike u dinamične razgovore s AI avatarima koji simuliraju kolaborativne zadatke poput pripreme za debatu ili kreativnog pitchinga. Dva ključna AI komponenta pokreću procjenu:
Executive LLM koristi pedagoške rubrike za usmjeravanje odgovora avatara i uvođenje ciljanih izazova — poput osporavanja ideja ili simuliranih konflikata — kako bi učenik demonstrirao svoje vještine.
AI Evaluator analizira transkripte razgovora prema istim rubrikama i generira detaljne povratne informacije s vizualnim ocjenama i konkretnim savjetima za poboljšanje.
Validacija rezultata
U studiji s 188 sudionika (18-25 godina) na NYU-u, AI ocjenjivanje pokazalo je podudarnost s ljudskim stručnjacima usporedivu s međusobnom podudarnošću samih stručnjaka. U drugoj studiji s kreativnim multimedijskim zadacima, Pearsonova korelacija između AI i ljudskih ocjena iznosila je visokih 0.88.
Potencijal za obrazovanje
Vantage otvara mogućnost integriranih “slojeva vještina” u nastavne planove gdje studenti dobivaju dvostruku povratnu informaciju — i o sadržajnom znanju i o razvoju ključnih kompetencija. To bi moglo transformirati način na koji se obrazovne institucije nose s procjenom “soft skills” u eri AI-ja.