OpenAI：首席财务官Sarah Friar提出以四项指标衡量企业AI投资ROI的AI记分卡

为什么传统指标无法衡量AI的真正价值？

询问次数或消耗token数量等传统指标衡量的是使用量，而非真正的商业价值。因此，OpenAI首席财务官（CFO）Sarah Friar提出了”AI记分卡”框架，通过具体的业务成果而非活动量来衡量投资回报率（ROI，return on investment）。

记分卡的四项指标

该框架包含四项指标：完成的有用工作量、每个成功完成任务的成本（企业为一个成功结果实际付出的成本，而非每次询问的成本）、系统可靠性（dependability），以及投入算力（完成任务所消耗的计算资源）的回报。每任务成本这项指标对于将AI解决方案成本与完成同一工作所需人力成本进行比较的企业尤其有用。

与以往方法的比较

与仅显示使用强度的询问次数和token消耗量常规报告不同，AI记分卡旨在衡量工作是否真正完成以及完成的成本。Sarah Friar将该框架呈现为一种工具，企业可借此比较AI投资的真实性价比，而非单纯追踪资源的原始消耗量。目标是让管理层根据可衡量的业务成果，而非仅凭供应商关于产品使用水平的报告，来决定后续的AI投资。