YYaaa News

OpenAI 首次把 AI 成本改按成功任務計|最低 token 價不等於最低結果成本

一句話總結

OpenAI CFO Sarah Friar 提議以成功任務完整成本衡量 AI,每 token 最低價未必帶來最低結果成本。

OpenAI 首次把 AI 成本改按成功任務計|最低 token 價不等於最低結果成本

OpenAI CFO Sarah Friar 7 月 17 日首次提出「Useful Intelligence per Dollar」計分框架。企業衡量 AI 投資,不再只看 seats、用戶數或 token 價格;四項指標是有用工作、成功任務成本、結果可靠度,以及規模增加後每美元產值。

完整成本包括 compute、員工工時、人工審查、重試與返工,再除以達標任務數。低價模型若需多輪嘗試,總成本會高於一次完成的高價模型;最低 token 單價不必然帶來最低 outcome cost。AI 採購的 ROI 改按可交付結果計。

Friar 引用 Artificial Analysis Coding Agent Index v1.1:不同 agent harness 下,Codex 的 GPT-5.6 Sol max 得 80.0 分,Claude Code 的 Claude Fable 5 max 得 77.2 分。總 output tokens 是 17,610,09538,395,071,前者少 54%。指數涵蓋 321 個任務、每項 3 次執行,比的是模型與 harness 組合。

OpenAI 同頁的 DeepSWE 圖列 72.7% 對 69.9%,estimated API cost 低 36.2%;它與 54% 的 Coding Agent Index token 比較不是同一張表。方法頁說缺失 telemetry 會排除,不按零計。原始總數是 17,610,095 對 38,395,071。

via Artificial Analysis / OpenAI / Artificial Analysis 方法
OpenAI 首次把 AI 成本改按成功任務計|最低 token 價不等於最低結果成本