据 VentureBeat Pulse Research 最新研究显示,在覆盖 107 家企业的调查中,企业 AI 基础设施支出正在快速增长,但成本衡量与治理能力明显滞后。来源显示,目前多数组织仍主要依赖大型云厂商和模型提供商 API 来运行 AI 工作负载,但未来新增预算正更多指向 AI 专用云等专业化算力层。与此同时,企业在更换或新增服务提供方上的意愿增强,许多组织计划在一年内调整供应商组合,其中不少会在一个季度内行动。
这项研究将上述现象概括为“AI 算力缺口”:企业一边加速购买 GPU、云资源和模型服务,一边却无法清楚看见每一次调用、训练或推理背后的真实单位经济性。对于依赖 OpenAI、Claude、Gemini 等模型 API 的开发团队和企业采购方来说,这意味着未来的竞争焦点不只是谁的 token 单价更低,而是谁能提供更稳定的接入、更清晰的成本核算和更灵活的资源调度。
企业仍在早期规模化阶段,但采购意愿已经先行
来源摘要指出,只有约 21% 的受访企业已经将 AI 运行在规模化生产环境中。这说明,多数企业仍处在试点、部门级部署或有限生产阶段。然而,支出计划并未等待组织成熟度同步提升。未来一年,企业最集中的评估方向是 AI 专用云,比例达到 45%,而这一层当前几乎还没有被这些企业广泛使用。
这反映出一个典型矛盾:企业已经意识到通用云和单一模型 API 不一定能满足长期 AI 业务需求,因此开始寻找更专业的算力供给、推理优化和部署选项;但从实际落地看,很多团队尚未建立完整的监控、计费归因、利用率优化和模型路由能力。换言之,采购动作跑在了工程治理之前。
从 API 使用者角度看,这会带来两个直接变化。第一,企业不再只问“某个模型每百万 token 多少钱”,而是更关注接入后端到端成本,包括上下文长度、重试、缓存、并发、延迟、失败率和人工运维成本。第二,供应商选择会更加动态,企业可能同时保留大型云、模型厂商 API、专用云和第三方平台的组合,以降低锁定风险。
GPU 利用率偏低,真实成本难以被精确追踪
研究中最值得关注的一点是,现有算力并未被充分使用。来源显示,83% 的企业报告 GPU 利用率在 50% 或以下;同时,只有 44% 的企业能够严格追踪 AI 计算成本。这意味着大量组织虽然已经投入基础设施,却很难回答几个关键问题:哪些业务线消耗最多?哪些模型调用性价比最低?GPU 空闲来自调度不佳、任务不足,还是架构选型错误?
对于企业 AI 团队而言,GPU 利用率偏低并不只是资源浪费问题,还会影响后续采购判断。如果无法测算现有资源的真实单位成本,就很难判断继续买 GPU、迁移到专用云、使用模型 API,还是通过中转与路由平台做多模型调度更划算。来源也提到,企业采购决策更看重集成能力和总体拥有成本,而不是表面的 token 标价;这与当前 API 市场的变化高度一致。
- 成本可视化:需要按模型、项目、用户、环境拆分调用成本,而不是只看云账单总额。
- 利用率优化:GPU 空闲、批处理策略、推理并发和缓存命中率都会影响实际单次请求成本。
- 供应商组合:企业可能在大型云、模型 API、专用算力和第三方平台之间动态切换。
- 接入复杂度:统一鉴权、额度管理、限流、日志和失败重试会成为采购评估的重要部分。
对开发者与 API 采购方的影响:从“买模型”转向“管算力经济性”
这份研究对开发者的启示是,AI 基础设施管理正在从简单的模型接入,转向更细颗粒度的成本与性能治理。过去团队可能只需要选定一个模型 API,把应用接上即可;现在则需要根据不同任务选择不同模型、不同供应商和不同算力路径。例如,高价值推理任务可以使用更强模型,批量文本处理可走低成本模型,延迟敏感场景则需要优先考虑并发稳定性和区域可用性。
对 API 中转、额度管理和模型调用中介服务而言,这类“算力缺口”也意味着市场需求会更明确:企业需要的不只是转发请求,而是统一接口、统一账单、调用统计、成本归因、模型降级、失败切换和并发控制。尤其在企业计划更换或新增提供方的背景下,多模型、多供应商的统一接入层会成为降低迁移成本的重要工具。
总体来看,企业 AI 投入仍在加速,但真正决定长期 ROI 的并非单次采购规模,而是能否看清每一笔算力支出的效果。对于正在接入 OpenAI、Claude、Gemini 等模型 API 的团队,下一阶段应优先补齐监控、计费、额度和路由能力。否则,基础设施买得越快,成本盲区也可能越大。
