乐于分享
好东西不私藏

引入 AI 半年,13 人测试团队什么都没沉淀下来

引入 AI 半年,13 人测试团队什么都没沉淀下来

一、半年之后什么都没留下

部门引入 AI 工具大概半年了,年初做了一次复盘。
我准备了一个问题:你们现在手头有哪些 AI 相关的东西,是可以直接交给下一个接手的人用的?
大家沉默了一会儿。
有人说本地有几个 prompt 文件,但没整理过,"也就自己看得懂"。有人说飞书上记了一些笔记,但不确定别人能不能复现。有人直接说,他调出来的东西就存在脑子里,没有写下来过。
最后统计了一下,整个团队里,六个月的 AI 使用经历,沉淀成可复用资产的部分:接近于零
这是一个挺扎心的结果。不是因为大家不努力——每个人都在认真用,有人花了三天调出来的 PRD 评审 prompt 效果非常好,但隔壁 BU 的同事完全不知道这件事,又从头摸索了两天。有人离职,他的 prompt 就跟着消失了。六个月,13 个人各自跑了一遍差不多的学习曲线,每个人学到的东西都锁在自己脑子里。
问题不在于大家愿不愿意用。大家都在用。问题在于工具用完就没了,资产才是留得住的东西。这两件事差别很大,但做着做着就容易混淆。

二、全员平均用AI,这条路走不通

最初我设计的方案很"公平":给全团队做培训,人人学会用 AI,然后各自在工作里用起来。
运行了一个多月,发现这个方案有几个地方会卡死。
第一个是没有人负责建东西。所有人都在用工具,没有人有余力把使用经验整理成可复用的东西——prompt库、规范文档、知识库。这种事的典型特征是:人人都觉得应该有人做,但谁也不觉得是自己该做的事。结果就是永远没人做。
第二个是工具质量参差不齐。13 个人用出 13 套不同风格的 prompt,各自顺手,没人愿意用别人的。跨 BU 协作的时候,经验完全无法迁移,像是在各自封闭的平行宇宙里进化。
第三个是新人的能力退化没人管。AI 大量介入之后,新人很容易变成"AI 输出的人肉审核机器"——时间长了,自己设计测试的能力会慢慢萎缩,而这件事在短期考核里根本看不出来。
这三个问题叠在一起,"人人平均用 AI"这个方向基本上走不通。需要换一个思路:把13个人里谁负责什么,有意识地设计清楚

三、拆出来三种人

我现在用的是一个三层模型。要先说清楚它不是什么:不是职级分层,也不是"愿不愿意拥抱 AI"的分层——那样分会制造不必要的对立。它描述的是团队引入 AI 之后,需要有人覆盖的三种职能

专门负责「建」的人(1–2人)

这层人干的事是建,不是用。维护共享的 prompt 库和 skill 库、评审和迭代工具质量、做新工具的验证、汇总各 BU 的使用经验、带新人上手。
不需要单独的编制,从三个 BU 里各找一个有测开倾向的工程师,拿出 20%–40% 的工时兼任就行。但有一点很关键:这个职责必须明确分配给具体的人,写进职责里,不能变成"大家顺便做"的事。一旦变成"顺便做",就等于没人做——这个教训我们已经踩过一次了。
这层人的产出,是其他层能站稳的地基。

日常使用工具的主力(6–8人)

这是团队的主力,覆盖三个 BU 的日常工作。
他们的职责说起来简单:用第一层建好的资产提升自己的效率,同时作为工具的"真实用户"持续反馈——哪个 prompt 好用,哪个用完之后觉得没什么用,哪个场景完全没有可用的资产。
这层人不需要关心 prompt 是怎么设计的,只需要知道什么场景用什么工具,以及怎么判断 AI 输出质量好不好。

守住底线的人(2–3人)

这一层最容易被误解:不是不会用AI的人,也不是能力弱的人。
他们的价值在于那些 AI 目前做不好的事:深度的业务理解、探索性测试的直觉、复杂场景的设计能力。这些东西不是靠 prompt 能调出来的,需要的是在这个系统里跑过很多需求、踩过很多坑之后积累的判断力。
设计这一层的原因是风险管理,不是情怀。如果 13 个人的测试产出全部依赖 AI,一旦 AI 在某类场景上系统性偏差,整个团队会漏掉同一类问题。留几个靠自己测试思维独立判断的工程师,是对这种系统性风险的对冲。
他们当然也可以用 AI,但核心竞争力不建立在"用好 AI"上。

四、13人+ 3 BU的具体分配

基于这个模型,参考分配大概是这样:
<p style="margin-top: 2.0pt; margin-right: 0cm; margin-bottom: 24px; margin-left: 0cm; line-height: 1.8; font-size: 17px; font-weight: 400; color: rgba(0,0,0,0.9)" mso-bidi-font-weight:normal;"="">角色

人数

分布

主要职责

资产建设者

2

 BU1BU3  各抽 1 人兼任

维护共享资产库、跨 BU 经验汇总

日常使用主力

8

三个 BU    2–3 

日常测试提效、资产质量反馈

底线守护者

2

BU2 为主

复杂场景、探索性测试、兜底审查

Leader

1

 BU

策略制定、度量、对外协调

这个分配不是固定公式,需要根据各 BU 的实际情况调整。几个判断思路:需求变更最频繁的 BU 最需要资产建设者,因为 prompt 要持续迭代;业务逻辑最复杂的 BU 要配底线守护者;测试自动化最薄弱的 BU,日常使用主力的价值最高。
具体到每个 BU,大致是这样排:

BU1(需求频繁型)- 1  Senior(兼任资产建设者,20% 工时)- 2  Mid(日常使用主力)- 1  Junior(日常使用主力,受 Senior 指导)BU2(业务复杂型)- 1  Senior(日常使用主力 + 用例评审)- 1  Mid(底线守护者)- 1  Mid(日常使用主力)- 1  Junior(日常使用主力)BU3(自动化薄弱型)- 1  Senior(兼任资产建设者,30% 工时)- 2  Mid(日常使用主力)- 1  Junior(往底线守护者方向培养)

五、统一管还是各自玩
三个 BU 的业务差异不小,这个问题迟早要碰。
全中心化的问题是通用资产往往不够好用。PRD 评审的通用 prompt 遇到 BU2 特有的业务规则,输出里可能一半都是废话。工程师用了两次发现没用,就不会再碰了——而且还会顺便对"团队 AI 工具"这件事产生负面印象。
全自治的问题是重复建轮子。高度相似的 prompt 三个 BU 各搞一套,每份都没人维护,慢慢都烂掉。
我现在用的是双层结构:通用层中心化维护,业务层各BU自己负责
通用层放的是跨 BU 都能用的东西:PRD 可测性评审 prompt(带三个业务变体)、测试用例生成 prompt(含分级约束版本)、Bug 描述规范化 prompt、一页纸的 AI 使用规范。由资产建设者统一维护。
业务层是各 BU 自己的私有资产:本 BU 特有的业务场景知识库、通用 prompt 的业务变体、历史 bug 场景库。这些东西外 BU 用不上,也没必要统一管。
两层之间的接口是"已知约束"字段——通用 prompt 里留的这个输入口,就是给各 BU 把自己私有知识塞进去用的。通用归通用,业务归业务,互不干扰。

六、落地靠设计,不靠命令

分工想清楚了,落地才是真正难的地方。
最常见的错误我见过不止一次:开个全团会,宣布"从下个 Sprint 开始,AI 工具使用情况纳入考核"。然后大家学会了表演使用AI——该填的表填了,该截的图截了,工作方式本质上没有任何变化,只是多了一道汇报动作。被考核的是频率,不是效果。
真正有效的推法是让工具本身变得值得用。
先找 1–2 个愿意试的人,让他们用出真实成果。比如某个需求的测设时间从 4 小时缩到 1.5 小时(这是我们团队真实出现过的情况),或者评审会前的确认清单让 PM 发现了之前没想到的场景缺口。把这个过程在团队内部讲一遍,让看到的人自己产生"我也想这样"的想法。这比任何强制推广都有效。
然后降低使用的摩擦:把工具入口放在大家每天都会打开的地方——飞书文档的快捷链接、测试用例模板里的 prompt 提示、一个集中的"AI 工具导航页"。不要让大家为了用一个工具先找半天入口,找不到的话下次就不用了。
资产建设者的角色也要定义对:他们是"团队的 AI 顾问",不是"AI 工具的执行者"。任何人遇到 AI 相关的问题都可以找他们。这样形成的是正反馈:工具好用 → 用的人多 → 遇到问题多 → 建设者收到反馈多 → 工具迭代更快 → 更好用。靠这个循环推,比靠考核推稳得多,也不会制造表演行为。

七、新人能力退化,怎么防

"提醒大家不要过度依赖 AI"这句话没什么用,说了等于没说。要防止退化,得把机制设计进流程里,让它自动发生。
我们用了三个动作。
每个季度做一次用例设计意图抽查:随机找每个人最近一个需求的 P0 用例,当场让他解释——这条用例覆盖的是什么测试点,等价类是怎么划的,如果它失败了说明哪里有问题。不是考试,是检查工程师有没有在使用 AI 的过程中真正动脑。解释不清楚的,不是惩罚,是触发一对一辅导的信号。
每个季度给底线守护者主导的 BU 安排 1–2 个"纯人工设计"的需求——从头到尾不用 AI 出用例,完全靠自己。目的不是排斥 AI,是维持"没有 AI 我也能干"的肌肉记忆。这是团队的战略储备,平时看不出来,关键时刻才知道有没有。
资产建设者每个月对 P0 用例做抽样评审,重点看几个症状:大量等价类堆砌、关键业务逻辑场景缺失、明显的"AI味"(正向偏多、缺乏业务上下文)但没有被工程师补充过。评审结果不打分,只做定性反馈,告诉工程师这个设计哪里可以改进,下次遇到类似场景可以怎么做。

八、六个月后怎么知道做没做对

分工落地之后,我会在六个月节点做一次健康检查,主要看三件事。
提效有没有真实发生。单个需求的平均测设时间有没有缩短,回归周期有没有压下来,评审会前的确认清单有没有让需求质量变好——不只看时间,也看这件事有没有改变上下游的协作方式。
提效有没有牺牲质量。线上缺陷数量的趋势是什么走向,漏测率有没有变化,P0 用例的执行失败率(也就是真正发现 bug 的比例)是不是还在合理范围。这三个数字放在一起看,比任何单一指标都有说服力。
团队有没有退化。随机抽查工程师,能不能解释自己的 P0 用例;资产建设者的共享资产数量有没有在增长;有没有人因为"AI 工具出了问题"就整个测试工作卡住——最后这个是最直观的退化信号。
有一个红线指标值得单独说:如果线上缺陷数量在用例数量增加的同时也在增加,说明 AI 提效是虚的,需要立刻复查整个流程。用例多了但 bug 也多了,这是最坏的结果,也是最容易被"用例数量增加了"这个表面数字掩盖的结果。

九、最后

引入 AI 工具这件事,最容易犯的错误不是"用得不够多",而是没有意识到它本质上是一个组织设计问题,不只是工具使用问题。
13 个人同时开始用 AI,六个月后大概率只会产生 13 套不同质量的 prompt 私藏,什么都没沉淀下来。这不是在批评大家不努力,这是在说一件事:当一个团队里没有人的职责是"建资产",资产就不会被建出来,不管每个人各自多努力。
三层角色模型要解决的事情说起来很简单:让建的人有时间建,用的人用对工具,守的人守住底线。谁做什么清楚了,团队的整体能力才能真正随时间积累,而不是六个月后还是一人一套私货。
这件事不需要审批,不需要预算,不需要招人。需要的是把现有的 13 个人重新对齐一次职责边界,然后给资产建设者腾出 20% 的工时,让他们开始建地基。
六个月后,地基的价值会自己说话。
下一篇预告:《变更影响分析 × AI:让回归从全量变精准》,欢迎关注。
本文基于作者团队实践经验,写作过程借助AI工具辅助整理和表达。
如果这篇对你有帮助,欢迎转发给正在推进AI落地的测试团队。有问题或想交流,可以在留言区留言。