乐于分享
好东西不私藏

HBM不够用了,AI SSD才是未来

HBM不够用了,AI SSD才是未来

本文由 写作鱼 创作

我判断,AI算力竞赛的下半场,胜负手不在GPU,而在存储。当所有人都在疯抢H800、B200的时候,一个被严重低估的战场已经悄然爆发——AI SSD。

AI算力竞赛的隐形战场

你肯定听说了,英伟达的Blackwell架构GPU,HBM内存堆到了192GB。三星、SK海力士的HBM产能,已经被几家巨头买断了未来两年的份额。但你想过没有,为什么非要死磕HBM?因为一个残酷的现实:GPU算得再快,数据喂不进去,也是白搭。

这就好比建了一条十车道的高速公路(GPU算力),但收费站(内存带宽)只有一个通道。车(数据)堵在入口,跑车也只能干瞪眼。HBM,就是这个昂贵的“收费站扩建方案”。它离GPU核心最近,速度最快,但成本极高,产能有限,物理上能堆叠的层数也快摸到天花板了。

那怎么办?我的观点是:聪明的玩家,已经开始在高速路旁边修“大型立体停车场”了——这就是AI SSD。

内存墙,卡住了AI的脖子

我们先说清楚“内存墙”是什么。别怕,不用懂技术细节。

GPU算力与数据搬运的失衡

你可以把AI大模型训练想象成让一个超级学霸(GPU)做一本超级厚的习题集(训练数据)。HBM就像是学霸手边只能放得下的一摞草稿纸(高速缓存)。他做题飞快,但做几页就得停下来,等别人从远处的书架上(传统SSD硬盘)把那本厚重的习题集搬过来,翻到指定页,把题目抄到草稿纸上。

问题就出在“等”这个环节。学霸思考一秒,搬书、翻书、抄题要花十秒。这就是“内存墙”。GPU的算力每年翻倍,但数据搬运的速度远远跟不上。

HBM的思路是,花巨资定制更高级的“速记本”(HBM),让手边能同时放更多草稿纸,减少起身取书的次数。但这个速记本贵得离谱,而且越做越大,笔记本都快夹不住了(散热和物理极限)。

所以,死磕HBM是一条越走越窄、代价高昂的军备竞赛。这是我认为当前行业最大的思维误区。

AI SSD,不是换硬盘那么简单

那AI SSD是什么?是给那个“远处的书架”装上机械臂和传送带!

分层协同的数据供给网络

传统的SSD,就像个安静的图书馆管理员,你借一本,他慢悠悠找一本。而AI SSD,从设计之初就是为了应对AI工作负载:它知道AI要的不是一本一本的书,而是连续不断的、海量的数据流。所以,它的核心能力是高并发、低延迟、超长寿命的稳定数据供给

我举个例子。传统数据中心硬盘,关注的是“仓库吞吐量”,一次运一大箱货。但AI训练是“流水线喂料”,需要每秒钟不间断、稳定地投送成千上万个小数据包。这要求完全不同的设计哲学。

关键在于“卸载”和“协同”。未来的AI服务器,我认为会形成这样的架构:

- GPU(学霸):只管疯狂计算。

- HBM(手边速记本):只存最急需的“热数据”。

- AI SSD(智能书架+传送带):预读、缓存、整理好接下来要用的“温数据”,以流水线方式精准投喂。

AI SSD通过更智能的接口(如CXL)、更快的协议(如NVMe)、以及硬件级的数据预处理能力,把GPU从漫长的数据等待中解放出来。它的目标不是替代HBM,而是与HBM协同,构建一个分层的、高性价比的“数据供给网络”。

商业逻辑:从卖铲子到卖“输油管道”

理解了技术逻辑,我们再来看商业逻辑。这更有意思。

HBM的生意,本质是“卖高端稀有金属”。玩家极少(三星、SK海力士、美光),技术壁垒极高,产能扩张慢,定价权强。它是寡头的游戏,下游的AI公司只有被卡脖子的份。

而AI SSD的生意,更像是“卖高性能输油管道系统”。这里有几点不同:

第一,市场格局未定。虽然也有三星、Solidigm、铠侠这样的传统存储巨头,但中国厂商(如长江存储)在闪存颗粒上已经站稳,国产主控芯片公司也在崛起。AI SSD是一个新的产品定义赛道,给了挑战者机会。它比拼的不只是颗粒工艺,更是对AI工作负载的深度理解、系统架构和软硬件协同能力。

第二,价值从硬件延伸到软件和生态。未来的AI SSD,价值绝不仅仅是一块硬盘。谁能提供最优的驱动、最智能的数据调度算法、与主流AI框架(如PyTorch)最深的集成,谁就能构建护城河。这从“卖产品”进入了“卖解决方案”的层面。

第三,它是降本增效的关键。对于动辄投资数十亿美元的AI公司来说,用相对廉价的AI SSD集群,去部分缓解对天价HBM的依赖,是极具诱惑力的财务选择。我判断,这将催生一个巨大的增量市场。当模型从万亿参数走向十万亿,训练数据从TB级走向PB级,唯一经济可行的路,就是用好AI SSD这个“数据蓄水池”。

未来属于“存储-计算”协同设计

所以,我的结论很明确:单纯追求算力FLOPS(每秒浮点运算次数)的时代即将过去。下一阶段的竞争,是“算力利用率”的竞争,是“存储-计算”协同架构的竞争。

存储与计算深度协同的未来

那些只会堆GPU的云厂商和AI公司,很快会遇到成本和生产率的双重瓶颈。而能率先在系统架构层面突破,将AI SSD深度融入其算力底座的公司,会获得显著的成本优势和迭代速度。

对于创业者和投资者,我的建议是:把目光从GPU的热闹中稍稍移开,看一看存储这个“隐秘的角落”。这里正在发生从介质、接口到系统层级的全面革新。这里的机会,不只是在制造一块更快的硬盘,而是在重新定义AI时代的数据基础设施。

AI的终极瓶颈,从来不是思考的速度,而是获取知识的速度。解决好“喂数据”的问题,远比制造一个更快的“大脑”更重要。AI SSD,就是那个关键的解药。

这场静悄悄的战争,已经打响了。你看懂了吗?