Gartner 2026 年 8 月的報告詳列了 AI 優化雲端基礎設施的支出預測:
回顧 AI 熱潮初期,訓練支出主導了基礎設施市場,如今這個局面已完全翻轉 。
更宏觀來看,整體 AI 優化 IaaS 支出 預估在 2026 年達到 423 億美元,較 2025 年的 215 億美元 成長 96.4%。2027 年,市場預計進一步成長至 661 億美元,增幅達 56.5% 。
若涵蓋非 AI 工作負載,全球整體 IaaS 支出在 2026 年預估達 2,873 億美元(年增 29.3%),並在 2027 年達到 3,599 億美元 。
Gartner 分析指出,兩股力量正推動推論支出超越訓練:
Gartner 分析師 Hardeep Singh 指出:「這股轉變正加速雲端消費模式,並創造對 AI 優化基礎設施的持續性需求。」
其他分析機構的數據也佐證了此一趨勢。Deloitte 的《Tech Trends 2026》報告估計,2026 年推論已占所有 AI 運算的三分之二 。The Futurum Group 的獨立預測則顯示,2025 年受管理的推論服務已達 231 億美元(占基礎設施支出的 58.6%),推論早在 2025 年就已超越訓練 。
Gartner 的支出數據背後是更大的圖像:
儘管推論成本快速下降——Deloitte 指出雲端 API 推論定價年降幅近 80%——但整體支出仍爆炸性成長,因為使用量的增長速度遠超過單位成本的下降速度 。
Gartner 同時發出一項警訊:到 2028 年,至少 50% 的 GenAI 專案將超出原定預算,主因是錯誤的架構選擇與缺乏營運專業知識 。
推論是主要元兇。不同於訓練這類一次性大額支出,推論成本在每次使用者或應用程式呼叫模型時都會產生。Gartner 預估,推論將占模型終身成本的 70% 以上 。
Gartner 建議 CIO 採取以下策略行動:
「推論反轉」不僅僅是一個支出統計數字;它代表了 AI 基礎設施優先順序的根本性重構。以建造更大模型作為主要成本驅動力的時代正在過去,取而代之的是大規模生產營運模型的時代。對雲端服務商而言,這意味著 GPU 與 ASIC 容量的持續需求。對企業而言,這意味著基礎設施規劃現在必須圍繞 AI 的營運成本來進行,而非僅僅是模型訓練的前期投資。
正如 Gartner 的報告所揭示,從開發到部署的轉變已經來臨,而預算項目將永遠不再相同。