夜雨聆风学习资料网

ARTICLE · 1249730

AI 造芯大考·03 | GLM-5.3:没想到它及格了!

AI 造芯大考·03 | GLM-5.3:没想到它及格了!

AI 造芯大考 · 连载 03

GLM-5.3 芯片首考:没想到它及格了!

满血上阵,自家框架监考,9/10 功能通过。

今天是第三位考生,测试条件跟Kimi K3拉齐:智谱满血版 GLM-5.3,推理强度max,跑在智谱官方框架 ZCode CLI 0.17.0 上——又一位主场作战的考生。本以为它的表现跟K3差距应该不会很大吧,没想到啊,它竟然及格了,还超出将近7分,一下子又觉得它的coding plan变香了。

01考场纪律:测试条件

  • 考生
    :GLM-5.3(满血版),思考强度max;
  • 编程框架
    :ZCode CLI 0.17.0——智谱官方框架,和上一位考生 Kimi K3 一样,同属「模型与框架同厂商」的主场配置;
  • 技能配置
    :未给模型添加任何额外 SKILL;Coding Framework 可能自带,未做任何定制;
  • 硬件资源
    :16 vCPU、40 GiB 内存、100 GiB 磁盘,与其他考生一致;
  • 物理评测
    :ASAP7 工艺、1 GHz 目标频率、3 个布局种子取中位数,Verilator / Yosys / OpenROAD 全开源工具链;
  • 题目与计分
    :T01–T10 十道题,功能 50 + PPA 50 + 时间 5,满分 105;功能不过,PPA 和时间分一票否决。

02Benchmark 测了什么?

十道题,梯度从「半小时速通」一路拉到「4 小时硬骨头」,考的全是数字 IC 工程师的日常硬活:

T01|SerDes RX 逗号对齐器

30 分钟 · 权重 3%

串行链路 PCS:对齐训练、字重组、失锁与重锁

T02|参数化同步 FIFO

60 分钟 · 权重 3%

流式缓冲:就绪/有效、同拍读写、非 2 次幂回绕

T03|APB4 定时器外设

90 分钟 · 权重 6%

寄存器外设:APB 时序、字节写、W1C、中断优先级

T04|就绪/有效轮询仲裁器

90 分钟 · 权重 6%

多端口流控:公平性、持续竞争、背压下数据保持

T05|异步 FIFO

120 分钟 · 权重 6%

跨时钟域:格雷码指针、双级同步、保守空满判断

T06|AXI4-Lite 到 APB4 桥

120 分钟 · 权重 10%

协议转换:读写并发、等待、响应背压和错误映射

T07|直接映射写回数据缓存

120 分钟 · 权重 10%

存储层次:脏行替换、写分配、字节使能、双侧背压

T08|1GbE MAC 缺陷修复与 VLAN 准入

120 分钟 · 权重 11%

存量工程:长规格理解、数千行代码、边界修复

T09|RV32I 五级流水线 CPU

120 分钟 · 权重 20%

流水线、旁路与冒险、可变等待存储器、精确异常

T10|多精度脉动阵列矩阵乘法(256-PE)

240 分钟 · 权重 25%

256-PE 真实脉动结构、多格式精确数值、持续流吞吐与背压

T10 是全卷最重的题:A/B 各每拍输入 1024 bit,要支持 INT8、INT16、FP16、BF16、FP8、FP4 以及 MXFP 等一堆数值格式,还要求「连续块流水」的持续吞吐——不许拿单块突发带宽糊弄。

计分规则自带芯片行业的价值观:

  • 功能正确性 50 分
    :一票否决。功能没写对,再好的PPA也是空中楼阁;
  • PPA 50 分
    :功能全过后才启用,按面积 / 布线后时序 / 能耗相对冻结参考实现归一打分;
  • 完成时间 5 分
    :又快又好的有奖励。

最必要的一条是:验收器独立于Agent报告做验收。Agent 自己在报告里写「PASS」、覆盖率 100% 都不算数——评测方固定 DUT 端口,用自带的参考RTL实现和 testbench 重新验收一遍,杜绝虚假自评与幻觉。

03考场实录

十道题里,有五道值得拿出来单说。其余五道——T02、T03、T05、T07 稳过,T04 当了电表刺客的第三位受害者——过程平铺直叙,分数见成绩单。

① T01|送分题,压哨交卷

30 分钟的热身题,GLM-5.3 一秒不差用满 1800 秒,踩点交卷,时间分一分没剩。功能是做对了,但交卷时出了岔子:run.sh、README.md、results.json 三件没交,验收方按交付缺陷扣了分。功能做对、交付做错——简单题目做的不够快,导致交付不完整,罪过倒也可原谅。

② T06|并发桥头,满血含金

看着是协议转换的脏活,杀机全在并发:读写仲裁、背压、响应时序,一个都不能错。Kimi K3 在这道题上 25 分翻车,DeepSeek Flash逆袭92分。GLM-5.3 用 42 分钟把这座桥修得服服帖帖,一路全过——拿到目前全场最高分94.61分。

③ T08|全场唯一翻车牌

给一份有 bug 的以太网 MAC 找茬补洞,考的是边角场景的敏感度。这是 GLM-5.3 十道题里唯一没全过的:VLAN 准入差一项、元数据头差一项、配置快照差两项、复位恢复差一项。有意思的是,DeepSeek Flash在同题上也翻过车,但错点完全不同——DeepSeek Flash栽在单字节短帧,它栽在策略和快照的边角。同一道题,两种死法。

④ T09|架构满分,时序露怯

从取指到旁路冒险全要自己做的五级流水线 CPU,前面两位考生都没在这道题上拿到功能全过。GLM-5.3 把 CPU 做出来了,ACT4 架构合规测试 45/45 全过。但代价写在时序上:目标频率1Ghz,setup 最差裕量 −0.469 ns,延迟约为参考实现的 1.45 倍。能跑通,但跑得不好看。

⑤ T10|功能登顶,内存拉闸

全卷压轴的 256-PE 脉动阵列。GLM-5.3 把功能 50 分拿满了——这是本号已发布测评里,第一台 T10 功能全过的模型。然后剧情急转:功耗时序综合阶段,内核确认触发 40 GiB 内存 cgroup OOM,评测机当场撑爆,按规则 PPA 和时间分裁为零。233 分钟,离 240 分钟时限只剩 7 分钟。它为了功能正确,显然是把电路写成了一坨*。

04成绩单揭晓

66.88

加权总分 / 105(暂列本刊第一)

9 / 10

功能全通过题数

三位考生加权总分对比(满分 105)

52.45

DeepSeek  Flash

58.15

Kimi K3

66.88

GLM-5.3

逐题对比直方图:■ DeepSeek V4.1 Flash ■ Kimi K3 ■ 本期 GLM-5.3

T01|SerDes RX 逗号对齐器64.96

82.86

DeepSeek Flash

75.49

Kimi K3

64.96

GLM-5.3

压哨 1800 秒、漏交三件套再扣 10 分

T02|参数化同步 FIFO89.28

89.07

DeepSeek Flash

89.17

Kimi K3

89.28

GLM-5.3

17.6 分钟交卷,三模型挤作一团

T03|APB4 定时器外设89.28

90.88

DeepSeek Flash

89.96

Kimi K3

89.28

GLM-5.3

继续整整齐齐

T04|就绪/有效轮询仲裁器66.46

62.63

DeepSeek Flash

68.13

Kimi K3

66.46

GLM-5.3

电表刺客三杀,无人上 70

T05|异步 FIFO89.15

90.00

DeepSeek Flash

89.18

Kimi K3

89.15

GLM-5.3

跨时钟域,稳

T06|AXI4-Lite 到 APB4 桥94.61

92.93

DeepSeek Flash

25.00

Kimi K3

94.61

GLM-5.3

已发布单题最高分,满血含金量所在

T07|写回数据缓存88.39

92.50

DeepSeek Flash

81.88

Kimi K3

88.39

GLM-5.3

64.8 分钟慢工,DRC 为零

T08|以太网 MAC 修复45.00

46.83

DeepSeek Flash

84.30

Kimi K3

45.00

GLM-5.3

十题唯一翻车,与 DeepSeek 同题不同死法

T09|五级流水线 CPU59.03

44.93

DeepSeek Flash

40.00

Kimi K3

59.03

GLM-5.3

功能拿满,时序把 PPA 打到 7.09

T10|256-PE 脉动阵列50.00

0.00

DeepSeek Flash

41.67

Kimi K3

50.00

GLM-5.3

第一台 T10 功能满分的已发布机器,40 GiB 内存仍OOM

这张成绩单的分水岭非常清楚:T06、T09、T10 三道大题合计 55% 权重,DeepSeek Flash 只全过一道,Kimi K3 一道没过,GLM-5.3 三道全过。功能门槛这套规则,平时不显山露水,一到压轴就成了分水岭。再叠加 T02–T05、T07 这些基础题稳定的 88、89 分,66.88 就这么来了——这也是本刊第一张加权过 60 的成绩单,「国产模型第一位及格者」,名符其实。唯一的翻车 T08 只占 11% 权重,伤而不残。

给从业者的启示:和前两位考生的差距(66.88 对 58.15、52.45),七成来自大题功能通过率——前两位在压轴题上丢的不是 PPA 分,是整张题的门票。另外 T10 的 OOM 提醒所有想拿 AI 做大规模设计的团队:256-PE 级别的功耗验证,40 GiB 内存都顶不住,那大概是设计变成了一坨翔。T10得PPA零分一点不冤枉。

下一篇:有可能是这两天最火的模型噢,敬请期待。

05来,上手玩玩

这套 Benchmark 的题目、验收源码、参考实现、ASAP7 工艺包和评测脚本全部开源,工具链不要钱,装好一条命令就能复测:

github.com/EasySilicon/DigitalICDesignBenchmark

欢迎下载、评估、收藏加星⭐。也欢迎拿你心仪的模型来跑一遍——说不定下一篇的主角,就是你测出来的。

上一篇:Kimi K3 芯片首考:想得最深的那位考生,倒在了终点线前

数据说明:文中每题满分 105(功能 50 + PPA 50 + 时间 5),功能未全通过时 PPA 与时间分按规则归零;显示分已计入交付扣分。GLM-5.3 运行框架为 ZCode CLI 0.17.0。

下一篇预告:同门三兄弟,联袂登场。关注不迷路。

相关学习资料