大型語言模型的競爭正從單純追求更高效能,轉向比較每次推論的成本效益。史丹佛大學《AI Index》指出,達到約 GPT-3.5 水準的模型,處理每百萬 Token 的成本在不到兩年間大幅下滑;a16z 將此趨勢稱為「LLMflation」,並比擬寬頻價格下降後帶動網路應用普及的歷程。
《AI Index》數據顯示,同等能力模型的每百萬 Token 推論成本,已由 2022 年 11 月約 20 美元,降至 2024 年 10 月約 0.07 美元,跌幅超過 280 倍。OpenAI、Google 與 Anthropic 等實驗室持續調降 API 價格,顯示價格、延遲與部署效率正成為企業選擇模型時的關鍵戰場。
全部報導
1 篇原始報導馬克翻舊帳
這個事件的歷史脈絡這個訊號沒有歷史回聲
訂閱馬克雷達週報
每週五,本週最強訊號送進收件匣。隨時一鍵退訂。