Gartner 2026 年 8 月的报告对 AI 优化云基础设施支出做出了以下预测:
作为背景,在生成式 AI 热潮早期,训练主导了基础设施支出。这一动态现已完全逆转 。
增长不仅限于推理。AI 优化 IaaS 总支出 预计在 2026 年达到 423 亿美元,较 2025 年的 215 亿美元 增长 96.4%。2027 年,市场预计将进一步增长至 661 亿美元,增幅 56.5% 。
全球整体 IaaS 支出(包括非 AI 工作量)预计 2026 年将达到 2873 亿美元(较 2025 年的 2222 亿美元增长 29.3%),2027 年达到 3599 亿美元 。
Gartner 指出,两大力量正推动推理支出超越训练:
Gartner 分析师 Hardeep Singh 指出:“这一转变正在加速云消费模式,并创造对 AI 优化基础设施的持续需求” 。
这一模式也得到了其他分析师的证实。德勤(Deloitte)在《Tech Trends 2026》中估计,2026 年推理已占所有 AI 计算的三分之二 。Futurum Group 的独立预测显示,2025 年托管推理已达 231 亿美元(占基础设施支出的 58.6%),推理早在 2025 年就已超越训练 。
Gartner 的支出数据是更大图景的一部分:
尽管成本快速下降——德勤指出推理云 API 定价同比下跌近 80%——但总体支出却在爆炸式增长,因为使用量的增长比单位成本的下降更快 。
Gartner 还发布了一项警示性发现:到 2028 年,至少 50% 的 GenAI 项目将超出计划预算,原因是糟糕的架构选择和缺乏运营经验 。
推理是主要“罪魁祸首”。与训练(通常是一次性大额支出)不同,推理成本在每次用户或应用程序调用模型时都会发生。Gartner 预计推理将占模型生命周期总成本的至少 70% 。
Gartner 建议 CIO 采取以下战略行动:
“推理翻转”不仅仅是一个支出统计数字;它代表着 AI 基础设施优先级的根本性重构。建造更大模型作为主要成本驱动力的时代正在让位于在规模化生产中运行这些模型的时代。对于云服务商来说,这意味着对 GPU 和 ASIC 容量的持续需求。对于企业来说,这意味着基础设施规划现在必须围绕 AI 的运营成本展开,而不仅仅是模型训练的前期投资。
正如 Gartner 的报告所表明的,从开发到部署的转变已经到来,预算项目将再也不会和从前一样。