当前位置:首页 > 行业观察

推理算力首超训练:HBM 与存储成最紧绷环节

xinhack3周前 (10-21)行业观察56

推理算力首超训练:HBM 与存储成最紧绷环节 行业观察

长期围绕 AI 基建的讨论都盯着训练芯片,但 10 月 20 日新浪财经援引 SEMI 中国负责人的判断,点出了一个被忽视的拐点:2026 年全球 AI 基础设施支出约 4500 亿美元,推理算力占比首次超过 70%;而存储,正在取代逻辑芯片,成为 AI 基础设施里最紧绷的那根弦。

一个被忽视的拐点

过去两年,叙事主线是“谁拿到更多 GPU 来训练更大的模型”。但当 Agent 与推理成为算力消耗的主引擎,重心就转移了:真正每天都在吞电、产 token 的,是海量的推理请求,而不是偶尔跑一次的训练任务。SEMI 中国的判断意味着,基建的瓶颈清单正在重写——逻辑芯片之外,存储带宽与容量成了卡脖子的新位置。

为什么是 HBM 与存储先绷不住

推理要快、要便宜,靠的是高带宽内存把模型和中间结果喂给芯片。报道提到,三家 HBM 供应商 2026 年的产能已全部售罄,产能缺口仍在 50% 到 60% 之间。与此同时,芯片端的压力只是换了形态:英伟达 GPU 订单积压延伸到 2027 年、金额达 1 万亿美元,GPU 与定制芯片交期拉长到接近一年。存储与芯片,谁先缓解都不代表全局解围。

芯片交付周期仍在拉长

Jefferies 对供应链的拆解还显示,工程与建筑劳动力短缺、冷却设备交付跟不上、变压器和电力部件供应紧张、备用发电机排产饱和,每一个环节都在拖慢“图纸变成通电服务器”的节奏。这说明瓶颈是多层的:芯片、存储、电力、工程能力互相牵制,单点突破救不了整体节奏。

推理时代的成本逻辑变了

当算力以“每瓦电产多少 token”来计价,成本结构就从“买多少卡”变成“卡跑得满不满、内存够不够快、电贵不贵”。推理占比超过 70% 意味着,未来降本的主战场不在训练集群的规模,而在推理侧的利用率、显存效率和能效比。谁能把单位 token 成本压下来,谁就握住了服务侧的利润。

对部署侧的机会

这对做应用和服务的团队是清楚的信号:与其追逐最新的训练集群,不如把精力放在推理优化、模型压缩和显存管理上。中小团队未必需要前沿级训练,但把推理跑得又稳又省,恰恰是大多数商业化场景的真实需求,也是更现实的竞争力来源。

要保留的边界

第一,上述产能与缺口数字来自供应链拆解与行业判断,会随季度变化;第二,“推理占比超 70%”是结构性趋势研判,不等于每个企业或地区都已如此;第三,存储与芯片的紧张都可能被扩产逐步缓解,但电力接入与电网稳定性不是短期能补的。把“趋势成立”和“当下就紧缺”分开看,结论才稳。

相关文章

AI 硬件浪潮:从手机到眼镜,谁会成为下一个入口

AI 硬件浪潮:从手机到眼镜,谁会成为下一个入口

手机做中枢、眼镜做感知、耳机做交互——依附既有习惯、解决高频痛点、云端大脑兜底,是 AI 硬件赢家的三个必要条件。…

个人智能体大战前夜:大厂为什么集体掉头做 C 端

个人智能体大战前夜:大厂为什么集体掉头做 C 端

一个月前 Meta 的 Muse 登顶下载榜,国内大厂紧接着密集推出个人智能体。这篇文章梳理这轮 C 端热潮和上一轮 B 端办公热有什么不同,以及商业化逻辑到底换了什么,不预测任何公司股价,只谈趋势,…

开源权重模型的私有化拉力:自托管隐性成本被低估

开源权重模型的私有化拉力:自托管隐性成本被低估

开源权重模型让企业第一次能私有化部署前沿级能力,数据不必出域。但 OECD 2026 年的测算显示,自托管只有在足够规模下才划算,低用量场景往往追不回成本;而硬件支出通常只占真实总成本的三到四成。本文…

语音智能体从玩具到客服入口:多模态落地的第一个真场景

语音智能体从玩具到客服入口:多模态落地的第一个真场景

多模态喊了很久,但真正先跑通的商业场景可能不是视频,而是电话。结合 Mistral 近期发布的语音模型和 2026 年一批语音客服平台的落地数据,这篇讲清语音智能体为什么比通用 Agent 更快变现,…

购物智能体改写零售:沃尔玛 Agent Gateway

购物智能体改写零售:沃尔玛 Agent Gateway

沃尔玛 10 月 21 日推出面向 AI 智能体的 Agent Gateway,允许获准接入的代理代用户下单;同一周亚马逊却在拦截同类代购。这篇从两家相反的动作出发,讲清智能体电商正在如何改写零售的流…

开源权重模型正在分流推理:主权云和边缘吃掉公有云

开源权重模型正在分流推理:主权云和边缘吃掉公有云

IDC 数据显示,过去一年 31% 的企业已把部分负载从专有模型迁到开源权重模型,过半组织计划用主权云跑 AI。本文分析推理需求正从公有云 API 流向开源权重加私有/边缘环境的趋势,以及它对云厂商、…

具身智能先赚钱的不是人形:仓储工业更早跑通

具身智能先赚钱的不是人形:仓储工业更早跑通

一提具身智能,大家先想到人形机器人跳舞。但信通院刚发布的产业关键词里,具身智能实景实训排在前头,强调从表演到作业。本文聊聊为什么仓储、搬运、质检这类非人形路线,反而比人形更早跑通商业化。以及这背后的数…

大模型价格战打到「每任务成本」,客户黏性正在被拆掉

大模型价格战打到「每任务成本」,客户黏性正在被拆掉

最近几笔企业大模型合同透出一个清晰信号:客户不再按模型强弱付费,而是按每任务成本一笔笔重新算账、重新分配预算。模型切换的黏性正以前想不到的速度松动,谁先把整条账单打下来,谁就拿走盘子。这对做选型的人,…