乐于分享
好东西不私藏

AI芯片的"发布会性能"和"量产烤机性能"之间,隔着一道良率+散热+供电+固件深渊——别装看不见

AI芯片的"发布会性能"和"量产烤机性能"之间,隔着一道良率+散热+供电+固件深渊——别装看不见
「PPT上1500 TOPS,机柜一上电——热保护先笑出了声」
你肯定见过那种画面:
新品发布,规格表干净利落——算力数字一排、能效比一行、工艺节点加粗。台下掌声。客户问"什么时候能送样",FAE说"Q3量产"。
然后三个月后,样片来了。你把它焊上板、搭进机箱、跑自己的workload(不是MLPerf demo那类精心修剪过的benchmark),连续压测到第二小时——
频率悄悄掉了两档,壳温逼近拐点,VRM那边电压纹波开始跳舞,推理延迟的P99开始翘头。你盯着监控曲线,心里那个声音很清楚:
不是芯片不行。是发布会讲的是peak,烤机讲的是sustained——而两者之间,站着良率、散热、供电完整性、固件/驱动栈四条暗沟,每一条都能把有效算力吃掉30%~50%。
这不是 cynicism。这是每个把AI芯片往量产机柜里推过的硬件负责人的共同记忆。

01

先把话说平:AI芯片这游戏,早就不是"设计多聪明"这一维竞争了
早些年大家比架构——NPU阵列怎么排、MAC利用率怎么榨、稀疏化怎么做、片上SRAM层级怎么分。这些当然重要,但当你把同一颗die放进一台1U/2U、放进一个风冷极限机箱、或者放进一个±48V工业电源环境里,胜负手就从"架构师画得多漂亮"转移到四个更土、更硬、更不性感的维度:
  • Die yield → System yield 的传导:你能流片回来一批好die,不等于你能把一批好板卡交付给客户。封装应力、TSV/Chiplet互连一致性、HBM焊接裕量——任何一个维度的分布尾巴都会变成RMA。
  • 热密度跑赢了散热方案:AI推理/训练的负载特征是"高密度持续功耗",不是burst。热设计从"够不够冷"变成了"能不能不让它自己降频自保"。
  • 供电完整性(PDN)不声不响吃掉你的margin:瞬态电流阶跃一大,VRM响应跟不上,你就看到计算正确性靠软件retry兜着走——客户管这叫"不稳定"。
  • 固件/驱动/BSP栈才是真正的"第二颗芯片":算力在硅上,但可用算力在软件栈上。调度器、算子库覆盖度、内存搬运路径、DVFS策略——这些不写进交付基线,你的TOPS就永远停在PPT。
一句话定性:这不是一个纯设计竞赛,它是一个"硅×热×电×软件"的四维耦合系统问题。谁还只拿峰值算力当卖点,谁就还在用2018年的脚本跑2026年的战场。

02

四堵墙拆开看:从"能亮"到"能满血服役"到底卡在哪
一、良率——你以为流片回来就算赢,其实真正良率是"到客户手里还能满频跑三年"的良率
业内人懂一个词:system yield,它远比die yield残忍。
先进工艺节点上,AI芯片的die尺寸动辄几百mm²起,一个bad spot就能把整颗高算力die打进降级bin。而Chiplet/先进封装路线(CoWoS、硅中介层、hybrid bonding……)虽然缓解了单颗掩模尺寸上限,却把"良率博弈"平移到了另一个平面——interposer缺陷、microbump开路/短路、TSV一致性、封装翘曲带来的机械应力,这些玩意你只测功能覆盖率测不出来,得靠长期的thermal cycling + 批量统计才能看见尾巴。
更现实的一点是:原生先进封装产能本身就是稀缺资源。台积电CoWoS产能过去两年持续吃紧,分配优先级天然靠向头部超大客户——这意味着对多数非头部AI芯片团队来说,"良率爬坡"不只取决于你的设计,还取决于你能在封装厂排到什么等级的line、拿到什么级别的process window。
所以别被"流片成功"骗了。发布会上的芯片是精选样片;量产后的芯片是统计分布。 真正拉开差距的团队,在tapeout前就已经把yield learning plan、降bin策略、封装应力仿真和可靠性screening方案一起做完了——而不是等回片后再救火。
二、散热——这是当下最不性感的"生死线",也是AI算力从实验室搬到机房的第一道闸
举一个近两年的行业参照就够了:英伟达Blackwell平台为了压住持续功耗,从系统层面走向全机架级液冷——单机柜设计热负荷上百kW的量级,下一代路线图甚至朝更高方向走。
这个数字的意义不在于"夸张",而在于它把一件事钉死在桌面上:
AI芯片的热设计问题已经从"散热器选铜的还是铝的"升级成"整机的冷却架构、气流组织、泵/换热器冗余、漏液监测都要跟着芯片定义一起改"。
对国产AI推理芯片/边缘AI SoC来说,你们不一定跑到百kW机柜,但一样躲不开这道墙:
热节流(thermal throttling)是有效吞吐的头号杀手——它不直接crash,但它让"标称算力 × batch"永远到不了。客户看你P99延迟曲线就知道,你的芯片在持续负载下已经被温度捏住了脖子。
壳温/Tjmax的裕量设计,跟PCB铜厚、TIM材料选择、散热器安装压力均匀性、机箱风道死角……全是耦合的。芯片原厂给的θJA只是起点,不是终点。
更别说很多场景根本不是数据中心——是工业现场的封闭电控柜、户外边缘盒子,环境温度夏天50℃起步,这时候你再谈TOPS,对方只问一句:"无风状态下你的降频曲线给我看看?"
这就是"发布会性能"和"量产烤机性能"之间那条最宽的裂缝:前者假设无限冷,后者活在真实温度场里。
三、供电完整性——最容易被忽略的暗沟,也是"看起来能跑但偶尔抽风"的罪魁
AI芯片的负载特征有一条很要命:它不是匀速的。注意力层的计算pattern、不同batch size切换、kernel launch burst——都会造成大电流阶跃(di/dt spike)。
这时候你的PDN(Power Distribution Network)如果不干净:
  • VRM瞬态响应不够快 → 电压跌落 → 逻辑时序margin被吃掉 → 表现成"偶发计算偏差/CRC fail/重启"
  • 多相控制器相位平衡没调好 → 某相过热 → 限流 → 全局降频
  • PCB上的via电流密度、铜皮温升、去耦电容布局——任何一处偷工都会在你的量产批次里变成"为什么这批板子一到下午就掉速"的悬案
老法师都知道:真正折磨人的不是芯片fail,是芯片在95%时间里正常、5%时间里性能悄悄塌方,而你找不到规律。 供电完整性就是这个"5%"的来源之一。
好的AI芯片公司,不会只给你一份power spec说"典型功耗多少、峰值多少"。他们会给你:
  • 电流剖面实测数据(不是平均,是瞬态包络)
  • VRM相数/开关频率/LC选型建议(适配你那块板,不是通用参考设计)
  • PDN impedance target curve(让他们自己的AE跟你一起跑仿真,而不是丢个原理图就走)
拿不出这三样的,基本等于在说:"我们芯片很牛,至于怎么让它不抽风——你自己猜。"
四、固件/驱动/BSP——这里藏着第二颗芯片,也是最决定"可用算力"的地方
这是最多团队翻车的地方,也是最不招人待见的实话:
客户买的从来不是TOPS,是"我的模型、我的框架、我的pipeline,在你的平台上能以什么吞吐/延迟/功耗跑起来、稳多久"。
这意味着什么?
意味着你的交付物里有一大坨不在规格表上但决定成败的东西:
  • 算子库覆盖度(Conv、MatMul是容易的;LayerNorm、Softmax、Attention变体、动态shape、量化校准flow……这些才是客户的真实模型长什么样)
  • 内存管理(显存/片上SRAM的分配策略、fragmentation、DMA搬运重叠——这些决定了你标称带宽能吃满多少)
  • DVFS策略(哪个频率点配哪个电压、idle→active切换延迟多少——直接影响tail latency)
  • BSP稳定性:内核驱动、设备树、PCIe链路训练稳定性、热插拔/复位路径——量产环境中这些不牢,TOPS再高也是"演示品"
业内一个心照不宣的规律:发布会讲架构,量产靠驱动。 你让客户AE花两周改代码才能跑起你的demo,和你给一套ONNX/TensorRT兼容路径让他半天接入——中间差的不是"生态开放度",差的是你到底把固件当"配套"还是当"产品本体"。

03

所以这跟今年国芯展(NICE)有什么关系?——它不是来看"有多快"的,是来看"怎么落地"的
说句直白的:如果你要去一个展只看"谁家算力数字最大",那跟刷新闻没什么区别。
但2026年10月12–16日,国家会展中心(上海)5.2馆的工博会集成电路展(国芯展/NICE),官方信息写得很清楚:它升格为工博会的独立专业IC展,指导来自上海市经信委、发改委、商务委、教委、科委这条线,承办方含上海市集成电路行业协会,支持单位挂到中国集成电路创新联盟、中国半导体行业协会、国家集成电路产业投资基金这一层——规模约30000㎡,定位是"芯智融合·生态共生·交易赋能",强调从芯片到应用场景的落地闭环:芯片设计→特色制程→封装集成→解决方案,并且特意把工业子岛(AI新基建/具身智能/智能汽车等)嵌进去,依托工博会十展联动去触达数控机床、自动化、机器人、智行、能源那些真正要把AI芯片装进机器里跑的人。
这个结构传达的信号非常具体:
来的不只是"芯片公司销售",更是那些已经在想热怎么散、电怎么供、BSP怎么交付、批量traceability怎么过审的团队——以及另一边,那些要把AI推理卡/边缘模组塞进自己产品里的系统厂、集成商、设备厂的硬件负责人。
你在展台上真正该问人家的问题,不是"你们跟谁脚对脚、多少TOPS多少钱",而是:
  • "你们的持续功耗热设计点在什么工况下测的?机箱条件给一下。"
  • "供电方面,你们有没有做过PDN仿真、给过VRM相控建议?"
  • "量产的话,封装级yield和reliability screening怎么做的?批次追溯链到哪一层?"
  • "固件栈的roadmap——我的模型格式/框架版本你们cover到哪季?"
这些问题你带到展台上当面问,和你在邮件里追三周的sales来回,效率差十倍。

04

两种姿态,高下立判
还在卖"发布会性能"的玩法
已经在卖"可部署性"的玩法
首轮沟通
算力数字+工艺节点+价格
持续功耗曲线+热边界条件+VRM设计包
交付基线
datasheet + 参考原理图
PDN target impedance + thermal validation checklist + 算子/BSP roadmap
对量产的态度
"tapeout成功了,就等客户下单"
"system yield plan + 降bin策略 + 封装可靠性screening + 固件release train"
跟客户的关系
芯片供应商
可审计、可交付、可长期服役的系统零件伙伴
老实讲,从2025年4月那个CSIA原产地认定通知(流片地=原产地、报关备PO凭证)出来之后,行业整体已经在往"可追溯、可证明、可审计"的方向拧螺丝了。算力再猛,纸面链断了对某些终端客户的审核来说一样卡——所以这个展之所以值得带你的板级功耗预算表和固件需求清单去,而不是只带名片,就是因为你要见的不是广告位,是接口。
如果你真要评估一颗AI芯片,别带计算器
带三样东西去展台就够了:
  1. 你真实workload的电流剖面/功耗预算(哪怕是个 rough 的),看对方眼睛亮不亮——亮了说明他们吃过量产苦;
  2. 你机箱的thermal envelope限制(封闭/风冷/液冷/户外?),看对方给的是通用台词还是能谈具体ΔT;
  3. 你的框架版本和模型格式清单,看对方BSP team有没有人能坐下来跟你排calendar,而不是"我们支持PyTorch/TensorFlow"八个字打发你。
情报交付的含义就在这:你不需要在那儿发现谁算力最高,你需要发现谁的工程地基能撑住你明年量产的那个坑。

05

一个不带滤镜的收尾问题
你们现在评估/导入的那颗AI芯片(或加速卡),最让你睡不着的是哪个断面——
  • A. 热/功耗:机箱塞得下但烤机降频,客户不接受吞吐波动
  • B. 供电/稳定性:偶发抽风找不到规律,板级PDN你心里没底
  • C. 固件栈:算子覆盖/框架适配的工程人力黑洞比你预想深一倍
  • D. 良率/交付:die好拿但封装/测试/批次一致性这条链你还看不到底
(不用报型号。)留言区说字母就行——同类坑聚一起,比展台上拿到的单页彩页有用得多。
本文为行业观察与个人从业视角,所涉政策信息引自中国半导体行业协会公开发布文件及海关总署相关管理规定。文中涉及的技术讨论为通用工程经验,不构成对任何特定企业或产品的背书/采购建议。具体设计与选型请结合贵司硬件/热/电源/固件团队独立验证。