夜雨聆风学习资料网

ARTICLE · 1097213

【精选研报】A2-王啸-测试分析AI助手的探索与实践.pdf附下载

【精选研报】A2-王啸-测试分析AI助手的探索与实践.pdf附下载

📄 本文PDF完整版已上传云盘,点击链接保存后可随时查阅:https://pan.quark.cn/s/0e14f8b17a4c


先核对输入材料里能站得住的判断和数据,再写正文。测试分析才是质量保障里最难被工具替代的那一环,也是大模型最先该下手的地方。


蚂蚁这边把这件事讲得很硬:测试分析是测试工程师在研发流程里最核心的价值产出,但大型项目往往要数天才能做完;培养一个业务领域质量工程师通常要1年以上,质量专家要2-3年。自动化框架、用例管理、DevOps都已经铺开了,真正卡人的,是“看懂需求、拆风险、写出该测什么”。


主线就这一条:先把测试分析做成中高级水平的AI助手,再往风险措施、灰度、监控、应急延伸。


为什么现在才轮到测试分析


研发链路里,需求、设计、开发、预发、灰度、发布都有工具托底。测试分析夹在系统设计之后、功能测试之前,还要同时覆盖业务风险和技术风险,后面还挂着用例设计、非功能测试、性能、兼容性。


它难提效,不是因为写用例慢,而是因为它高度依赖经验。换个业务域,人就要重新养一轮。资金风险防控、财务数据质量、微服务端到端链路,这些场景更不允许“凭感觉测”。


所以现在动手,逻辑很直接:通用大模型已经能聊测试通识,但还撑不起业务风险拆解;而测试分析又是少数能把人天直接打掉、还能把专家经验沉淀成资产的环节。


受益的是测试团队和业务质量负责人——大型项目不用再按“数天分析”排期。受损的是纯靠年限吃饭的分析方式:通识问答会被模型追上,真正拉开差距的是领域知识和风险判断。


训练目标不是会答题,是能干活


蚂蚁给模型定的水位是中高级测试领域AI助手,能力拆成三块:测试通识、测试设计、风险分析与措施推荐。


通识覆盖计算机知识和等价类、边界值、判定表这类方法。设计能力是拿PRD和系统设计文档,产出功能、性能、安全等场景和用例。风险侧要能做业务风险、技术风险,并推荐线下、灰度、监控、应急措施。这和他们说的“变更三板斧”——灰度分析、监控/核对分析、应急分析——是对齐的。


知识注入走结构化语料:问答抽取、问答生成,再叠加相似问相似答。输入不只是Q→A,还有原文+Q、相似Q、QA+相似Q。底座是蚂蚁自己的语言大模型。另外还在做PRD与用例自动关联、多模态数据处理,prompt按定角色、定任务、思维链、定格式、举例子来拼。


效果对比给了一道中高级软考题:什么是白盒测试。标准答案偏结构测试、单元阶段、可见内部逻辑;GPT3.5讲得完整但偏教材;蚂蚁测试分析模型会把内部实现、规格符合、覆盖率和性能分析串起来。材料没有给出可复用的准确率数字,只能看到方向:通识能对上,真正要看的是用例设计和风险措施。


实践侧已经落到业务域:按测试设计方法出用例,按业务场景出测试分析,再出风险防控策略。产品形态也具体了——文档智能助手能生成测试分析文本,也能出Xmind。


下一跳不是更会写用例,是把专家拆成一串Agent


展望写得很清楚:测试分析还要吃进业务领域知识(产品、系统、链路背景),再叠技术风险、稳定性、系统代码/链路、全量线上问题/故障、历史产品缺陷。人设会从测试质量专家扩到代码质量专家。


再往后是一串Agent:需求、系统设计、代码生成、测试分析生成、测试代码生成、发布、运维。测试分析不再是单点助手,而是质量链路里的一环。


谁会受益:已经有文档、链路、缺陷沉淀的团队,模型有料可喂。谁会难受:只有用例仓库、没有风险分析和故障资产的团队——助手会变成“会写但测不准”。


该盯的不是模型会不会背白盒测试定义,而是它能不能在真实业务里把风险措施写到灰度、监控、应急这一层。


观察清单


- 大型项目的测试分析周期是否从“数天”压下来,而不是只缩短了通识问答时间

- 输出是否同时包含用例、业务/技术风险、以及线下/灰度/监控/应急措施,而不是只有用例列表

- PRD与用例自动关联、Xmind/文本双形态,是否进入真实业务域日常,而不是演示环境

- 训练语料是否持续注入领域知识、线上故障和历史缺陷;缺这三项时,助手水位会停在通识层

- 后续是否出现测试分析Agent与代码生成、发布、运维Agent的衔接,而不是单独一个聊天窗口





以下为原文预览:





需要查看更多专题研究报告,可以微信扫一扫/长按识别下方优惠券付费成为会员,30000+份报告,随意下载,不受限制,报告涵盖全行业。


【大吉行业专题报告库】:公众号@大吉研报星球


作者 选择加入即可获得:

1. 星球精选专题研报

2. 1v1研报专题定制整理、查找与下载服务



戳“阅读原文”下载报告

相关学习资料