乐于分享
好东西不私藏

教AI填一次复杂网页表单,它替你把整张Excel录完

教AI填一次复杂网页表单,它替你把整张Excel录完
已关注
关注
重播 分享
最近 OpenAI 给 Codex 桌面端推了个改变游戏规则的功能——Record & Replay(录制与回放)
简单说:你在电脑上把操作做一遍,Codex 看着学着,自动生成一份可复用的 Skill(技能文件)。下次换数据,它自己按你教的流程重跑。
我拿它干了一件超爽的事——把 Excel 里的化学成分表,自动逐条录入 Intertek 的检测申报系统(无 API、无批量导入),而且这个系统极其变态:
✅ 成分名要先在搜索框输关键字 → 等下拉联想 → 选系统匹配项 → 自动带出 CAS/含量
✅ 系统库没有的新物质 → 要手动切 Tab 填英文名、CAS、百分比
✅ 每种物料多组分、多字段、多判断分支
以前这种活要么雇人填,要么写 Selenium 死磕选择器。我用 Codex 只做了三件事:

🧪 我的真实场景——Intertek 化学成分上报

GRS/OCS 认证需要往 Intertek iCare / 申报系统里填产品材质成分:

  • 有 CAS 号的 → 搜 CAS 或英文名 → 选下拉联想 → 系统自动带出物质信息 → 填%


  • 系统库没有的新助剂 → 点"新增物质"手动填英文名、CAS、%


  • 每组分循环添加,最后保存提交


步骤:

  1. 把化学成分 Excel(物质名、CAS、%、备注)上传给 Codex 或放本地目录让它读


  2. 打开 Codex 内置浏览器,进入 Intertek 申报页


  3. 开启 Record a skill亲自示范录入 2~3 种组分(含一次搜到了选、一次搜不到切手动填)



  4. 停录 → Codex 分析我的鼠标/键盘/界面元素,抽象成结构化 Skill(不是死记坐标的宏)


  5. 对它说:



用刚才录好的"Intertek成分录入 Skill",读取 formula.xlsx 的 A2:D 列,逐行循环:先搜物质名→有联想点选填%,无联想切手动新增填 CAS 和 %→添加下一组分→保存提交

屏幕开始自己动——切搜索框、等下拉、判断有无结果、分支处理、填数、点按钮……几百种物料,我去泡了杯茶,回来全录完了 ✅

🌍 同样的逻辑 = 跨境电商商品上架自动化

这个玩法一模一样适用于各平台商品上架,比如:

  • 阿里巴巴国际站(Alibaba International):属性要先搜关键词选下拉、部分属性手工填、多SKU图片轮播添加


  • 中国制造网(Made-in-China):参数组有联动下拉、规格先搜后选、描述切富文本编辑器


  • Shopee / 1688 / ERP 老系统:凡是没有开放 API 或批量导入的复杂 Web 表单


你只需要:

  • 商品数据整理成 Excel


  • 在 Codex 内置浏览器示范上架 1~2 个商品(含搜属性、选下拉、手工补字段)


  • 录制生成 Skill → 让 Codex 循环跑整张表


以前要招兼职填一周,现在录一遍 → AI 干一晚上。

⚙️ Record & Replay 和传统 RPA/宏的本质区别


对比传统 RPA 录制宏Codex Record & Replay
记录内容像素坐标 / DOM 选择器操作意图 + 界面语义理解
UI 微变容易崩结合 Computer Use 自适应
分支判断需手写逻辑演示时包含分支即学会
输入参数化明确标注可变输入(文件/起止行)
可读性黑盒生成可审阅编辑的 SKILL.md
本质区别:你不再是"录按键",而是"教会 AI 你怎么完成这件事"

📋 快速上手(macOS + Codex 桌面端)


需开启 Computer Use 权限(辅助功能 + 屏幕录制)


  1. 安装插件:Codex → Plugins → 添加 Record & Replay


  2. 开始录制:对话框输入 @Record & Replay 开始录制:Intertek成分录入流程,或点悬浮"Record a skill"


  3. 演示一遍:在 Codex 内置浏览器完整走 2~3 条(含搜到选 + 搜不到手动新增的分支)


  4. 停止生成 Skill:说"录完了",Codex 自动保存 SKILL.md,可打开微调


  5. 回放执行:新对话 → "用 Intertek成分录入 Skill,读取 formula.xlsx A2:D 列循环填入此页面"


💡 小贴士:录制前告诉它哪些是可变参数;密码/验证码别录进去;复杂判断分支至少演示一次让它学到。

💬 一点感想

过去让 AI 自动化,得把流程写成精确 Prompt 或写脚本。
Record & Replay 把门槛降到了"你正常干一遍活"
对于大量有 GUI 但没 API 的企业系统——检测申报、报关、ERP、跨境电商后台——这近乎降维打击。

你演示一次,AI 继承你的经验包。这才是 Agent 该有的样子。


心动了吗?你也来试一下,告诉我你觉得还有什么应用场景?