资讯
英伟达Rubin Ultra缩水,SemiAnalysis:瓶颈在于每单位带宽成本,而非每单位容量成本
📋总体概括
SemiAnalysis分析称,英伟达将Rubin Ultra的HBM堆叠从12-Hi下调至8-Hi,并非单纯削减容量,而是因为AI推理瓶颈在每单位带宽成本而非每单位容量成本。8-Hi可减少约三分之一的DRAM裸片用量,缓解紧张的HBM供应,同时堆栈数量与接口不变,带宽得以维持甚至提升。这一调整标志着HBM竞争逻辑从堆容量转向优化带宽经济性,反映推理时代对持续搬运模型权重和KV Cache的带宽需求正在超越容量需求。
⚡关键信息
- ▸英伟达将Rubin Ultra的HBM从12-Hi下调至8-Hi,减少约三分之一DRAM裸片用量
- ▸SemiAnalysis判断:AI推理瓶颈是每单位带宽成本,而非每单位容量成本
- ▸HBM堆叠层数决定容量,带宽主要取决于堆栈数量、接口宽度和传输速率,故降层数可保带宽
- ▸推理负载需持续搬运模型权重与KV Cache,带宽重要性持续上升
- ▸HBM竞争逻辑转向:在DRAM、功耗和成本约束下追求最高有效带宽
🔥犀利点评
这是一次教科书级的取舍:与其在12-Hi上和良率、供应死磕,不如砍掉用不上的容量,把钱花在刀刃——带宽上。SemiAnalysis点破了一个行业伪共识:堆容量是训练时代的惯性思维,推理时代每一美元买到多少带宽才是真账。英伟达的精明在于它有定价权,敢主动缩水还讲故事;但对纯拼参数的国产和国外HBM追赶者来说,这相当于规则变了——层数军备竞赛的意义被直接釜底抽薪。
📰 相关资讯(与本文相关的其他资讯)
本文由本站自动聚合,以下为原始来源:前往 华尔街见闻 阅读全文 →