AI 模型報告
AI 模型產業趨勢報告
模型規模、訓練成本、上下文長度、企業支出以及當前的模型市場構成。
訓練算力增長
Epoch AI4.5x/yr
增長率
前沿訓練成本增長
Epoch AI3.5x/yr
增長率
上下文窗口增長
Epoch AI30x/yr
增長率
企業支出增長
Menlo Ventures3.2x YoY
增長
關鍵發現
市場正隨著規模、成本和買家行為而轉變
計算強度、訓練成本、上下文長度和企業支出正同步變動。模型選擇應結合這些行業壓力來解讀,而不僅僅是參考單一的基準測試分數。
01
根據 Epoch AI 的數據,自 2010 年以來,著名 AI 模型的訓練計算量估計每年增長 4.5 倍。
02
自 2020 年以來,前沿語言模型的估計訓練成本每年上升約 3.5 倍。
03
自 2023 年以來,領先語言模型的上下文窗口估計每年擴展 30 倍。
04
這些軌跡是根據公開披露的模型特徵所建立的長期估算值,並非經過審計或標準化的數據。
資料來源:Epoch AI Trends。所有數據均為根據公開模型披露資訊所做的估算,並會隨著新數據的出現而進行修訂。
行業趨勢指標
針對規模、上下文長度、企業支出、使用研究規模和組織採用情況的外部來源訊號。