OpenAI: CFO Sarah Friar predlaže AI scorecard sa četiri metrike za mjerenje ROI-ja AI ulaganja tvrtki

Zašto tradicionalne metrike ne mjere pravu vrijednost AI-ja?

Tradicionalne metrike poput broja upita ili potrošenih tokena mjere korištenje, ne stvarnu poslovnu vrijednost. OpenAI-jeva CFO (glavna financijska direktorica) Sarah Friar zato predlaže okvir “AI scorecard” koji povrat ulaganja (ROI - return on investment) mjeri kroz konkretan ishod posla, a ne kroz obujam aktivnosti.

Četiri metrike scorecarda

Okvir uključuje četiri mjerila: obavljeni koristan posao, cijenu po uspješno dovršenom zadatku (koliko firmu stvarno košta jedan uspješan ishod, a ne jedan upit), pouzdanost sustava (dependability) te povrat na uloženi compute, odnosno računalne resurse potrošene za obavljanje zadatka. Metrika cijene po zadatku posebno je korisna tvrtkama koje uspoređuju trošak AI rješenja s troškom ljudskog rada za isti posao.

Usporedba s dosadašnjim pristupom

Za razliku od uobičajenih izvještaja o broju upita i potrošenih tokena, koji pokazuju samo intenzitet korištenja, AI scorecard cilja mjeriti je li posao doista obavljen i po kojoj cijeni. Sarah Friar okvir predstavlja kao alat kojim tvrtke mogu usporediti stvarnu isplativost AI ulaganja umjesto praćenja sirove potrošnje resursa. Cilj je da menadžment donosi odluke o daljnjim AI ulaganjima na temelju mjerljivog poslovnog ishoda, a ne isključivo na temelju izvještaja dobavljača o razini korištenja proizvoda.