Day 03|Excel 重复数据太多?我让 AI 做了个清理工具

AI帮我做 · Day 03

有问题，就让 AI 试试看。

前两天，我让 AI 帮我做了两个非常简单的工具：

Day 01：图片批量压缩

Day 02：文件批量重命名

今天继续。

这次的问题来自一个大家可能都很熟悉的东西：

Excel。

SECTION 01Excel最让人头疼的，不是数据多

而是：

数据乱。

比如一份客户名单：

张三    13800138000    ABC公司李四    13900139000    XYZ公司张三    13800138000    ABC公司王五    13700137000    DEF公司李四    13900139000    XYZ公司

如果只有几十行，手动删一下也没什么。

但如果是：

几千行、几万行呢？

你很可能需要：

筛选 → 排序 → 查找重复 → 删除 → 检查

而且最麻烦的是：

你还不太敢直接删。

万一删错了怎么办？

SECTION 02所以我突然想做一个很小的工具

今天我给 AI 的需求非常简单：

帮我做一个 Excel 重复数据清理工具。

用户上传 Excel 文件。

自动识别重复的数据。

把重复记录标记出来。

用户确认以后，再删除重复数据。

最后可以下载一份清理后的 Excel 文件。

就这么简单。

然后：

让 AI 开始做。

SECTION 03第一次做出来以后，我发现一个问题

最开始 AI 给我的思路是：

找到完全一样的行，然后删除。

这当然没错。

但现实中的 Excel 往往没有这么整齐。

比如：

张三    13800138000    ABC公司张三    13800138000    ABC有限公司

这两条到底是不是重复？

如果只看整行：

不是。

但如果用户说：

“只要手机号一样，就认为是重复。”

那：

是。

所以我发现：

“重复”其实不是一个固定答案。

它取决于：

你按照什么字段判断。

SECTION 04那就继续让 AI 修改

我告诉 AI：

增加重复判断方式。

可以选择：

整行完全相同
按某一列判断
按多列组合判断

这样用户上传Excel以后，可以自己选择：

按手机号判断

1380013800013800138000

→ 认为重复。

按邮箱判断

test@example.comtest@example.com

→ 认为重复。

按“姓名 + 公司”判断

张三 + ABC公司张三 + ABC公司

→ 认为重复。

一下子就比最开始实用了很多。

SECTION 05我又让 AI 加了一个“不要直接删除”的步骤

这个功能我觉得非常重要。

因为处理数据的时候：

宁愿多一步，也不要误删。

所以工具的流程变成：

上传 Excel     ↓选择重复判断方式     ↓扫描数据     ↓显示发现多少条重复     ↓预览重复数据     ↓确认     ↓删除重复项     ↓下载新 Excel

比如：

原始数据：3286条

工具发现：

重复数据：247条

用户确认以后：

清理后：3039条

这样至少在真正删除之前：

用户知道发生了什么。

SECTION 06这时候我突然意识到一个问题

前两天做工具的时候，我一直在想：

“这个工具怎么实现？”

今天我开始越来越习惯换一种思路：

“用户真正需要什么？”

这两个问题看起来差不多。

实际上区别很大。

如果只想“实现功能”，可能最后得到的是：

能跑。

但如果从用户角度想：

上传以后怎么办？

出错怎么办？

能不能预览？

我敢不敢点击删除？

处理完以后怎么拿回来？

工具才开始慢慢变得真正可用。

SECTION 07这可能才是AI编程最有意思的地方

AI可以帮我写代码。

但它不会自动知道：

这个工具到底应该怎么用。

至少现在不是。

所以我发现：

AI负责的越来越像：

实现。

而人负责的越来越像：

提出问题、判断结果、不断修改。

以前程序员花大量时间：

把想法变成代码。

现在可以逐渐变成：

把想法说清楚，然后让 AI 尝试实现。

当然，这并不意味着：

“以后完全不需要程序员了。”

实际开发过程中，AI依然会犯错。

会理解错需求。

会写出Bug。

会产生一些看起来正确、实际却不对的代码。

所以：

测试和判断反而变得越来越重要。

SECTION 08今天这个工具其实也很普通

说实话。

网上肯定已经有很多 Excel 数据清理工具。

所以我也不会把它包装成什么：

“革命性的AI产品。”

不是。

它就是一个非常小的工具。

但我现在越来越喜欢这种“小东西”。

因为它们让我不断验证一件事情：

以前一个人觉得“不值得开发”的小需求，现在是不是可以直接让 AI 做出来？

如果答案是：

可以。

那么以后可能会出现越来越多这样的东西。

一个人。

一个问题。

AI。

然后：

一个小工具。

SECTION 09今天的实验结果

示例结果

3286 条记录 → 识别 247 条重复 → 清理后 3039 条。这里使用的是演示数据，用来说明“先预览、再确认”的处理流程。

工具：Excel重复数据清理工具

解决的问题：快速发现和清理Excel中的重复记录

开发方式：AI辅助开发

开发时间：本次未单独计时

AI参与程度：AI 完成主要代码，我负责需求、测试与迭代

工具状态：功能已完成并通过真实 Excel 文件测试

处理数据：8 条测试记录，按手机号识别 3 组重复，清理后保留 5 条

开源仓库：gitee.com/ysjsgzq/ai-small-tools

Day 03 目录：tools/day-03-excel-deduplicator

SECTION 10我开始发现一个有意思的方向

做了三天以后，我发现：

前两个工具比较偏个人效率。

今天这个工具开始接触到：

真实的工作场景。

而工作场景里，其实有大量这样的事情：

整理Excel。

整理客户。

整理报价单。

处理产品资料。

写邮件。

生成文案。

制作报表。

整理订单。

……

这些事情可能没有什么技术含量。

但每天都很烦。

而这恰恰可能是：

AI最值得帮忙的地方。

SECTION 11所以，下一次我想继续试

我现在越来越想知道：

如果不是做一个普通的小工具，而是直接让 AI 帮一个真实行业的人解决一个具体问题，会怎么样？

比如：

外贸业务员。

电商运营。

小老板。

销售。

行政。

设计师。

工厂业务员。

……

他们每天到底有哪些：

“烦，但又不得不做”的事情？

也许那里才藏着真正值得做的东西。

AI帮我做 · Day 03

今天解决的问题很小：

Excel里重复数据太多。

于是：

让 AI 帮我做了一个重复数据清理工具。

做完以后，我又多了一个问题：

如果让 AI 开始帮小老板、销售、外贸业务员解决真实工作问题，会发生什么？

这个问题，我准备继续试试看。

有问题，就让 AI 试试看。

Day 03，完成。

AI 帮我做 · DAY 03

Excel 里重复数据太多？先让 AI 试试看。

你最想让 AI 帮你解决哪个“烦，但又不得不做”的问题？