导读
4 月 11 日,OpenClaw 社区一个叫"Computer-Use"的插件悄悄上线。
一周后,GitHub 星标突破 2.3 万。
这是 OpenClaw 生态中增长最快的插件,没有之一。
它做的事情很直接:让 AI 智能体直接控制你的电脑——打开软件、操作文件、浏览网页、填写表单。你只需要用自然语言告诉它要做什么。
不是远程桌面,不是自动化脚本,是真正的"AI 看着屏幕,像人一样操作鼠标和键盘"。
它是怎么工作的?
Computer-Use 的核心逻辑很简单:
第一步:AI 截取当前屏幕画面,"看"到屏幕上有什么。
第二步:大模型理解屏幕内容,判断下一步该点击哪里、输入什么。
第三步:通过系统级的输入模拟,执行点击、打字、滚动等操作。
第四步:重复第一步,直到任务完成。
整个过程形成了一个"观察-理解-执行"的闭环。
听起来不复杂,但实际体验非常震撼。
机器之心在测评中展示了几个真实场景:
"帮我把桌面上的 50 个 Excel 文件中的数据汇总到一个表格里。"AI 逐个打开文件,读取数据,粘贴到汇总表,全程 3 分钟。
"在公司的报销系统里提交这 12 张发票。"AI 自动登录系统,填写表单,上传发票图片,提交申请,全程不需要人类干预。
"帮我查一下这周所有未回复的邮件,按紧急程度排序。"AI 打开邮箱,逐封阅读,分类整理,生成一份摘要报告。
这些不是预设的自动化脚本,而是 AI 实时观察屏幕、理解界面、做出决策的结果。

为什么一周就有 2.3 万星?
因为它解决了一个真实的痛点:重复性电脑操作。
V2EX 上有开发者分享了他的使用体验:
"我每天要花两个小时在各种系统之间切换——CRM 系统录入客户信息、OA 系统提交审批、ERP 系统查询库存。这些操作每一步都不难,但加起来非常耗时。Computer-Use 上线后,我用自然语言描述了这些流程,AI 自动帮我完成了。现在每天节省一个半小时。"
另一个开发者说得更直接:"这不是一个插件,这是一个新的交互范式。"
从命令行到图形界面,从图形界面到语音交互,从语音交互到……AI 直接操作?
Computer-Use 可能代表了人机交互的下一个阶段:你不需要学习任何操作方式,只需要告诉 AI 你想要什么结果。
技术价值在哪里?
36 氪在分析文章中指出了三个关键价值:
第一是降低自动化门槛。传统的 RPA 工具需要专业的实施团队来设计和维护流程,平均成本在 10 万到 50 万元。Computer-Use 让每个会用自然语言的人都能创建自动化流程,成本几乎为零。
第二是适应界面变化。传统自动化脚本对界面变化非常敏感——按钮位置变了、网页结构改了,脚本就失效了。Computer-Use 通过实时观察屏幕来理解界面,天然具备适应变化的能力。
第三是跨平台兼容。不需要针对不同系统开发不同的自动化方案,Computer-Use 通过视觉理解和模拟操作来完成任务,理论上可以在任何有图形界面的系统上运行。
使用场景和局限性
目前已经出现的使用场景包括:
办公自动化:数据录入、报表生成、邮件处理、系统间数据同步。测试运维:自动化 UI 测试、回归测试、跨浏览器兼容性测试。数据分析:多源数据汇总、图表生成、报告撰写。个人效率:文件整理、批量重命名、格式转换、信息抓取。
但也有明显的局限性:
安全性是最大的担忧。让 AI 控制你的电脑意味着它能看到屏幕上的所有信息,包括密码、银行账户、私人聊天记录。虽然 Computer-Use 提供了沙箱模式,但企业级安全标准还有差距。
性能方面,每次操作都需要调用大模型来观察和理解屏幕,延迟远高于传统脚本。对于需要高频操作的场景,目前还不适用。
准确性也不是 100%。AI 对复杂界面的理解有时会出错,比如把两个相似的按钮搞混,或者在弹窗出现时做出错误判断。
一位安全工程师在 V2EX 上写道:"Computer-Use 是 90% 场景下的好工具,但那剩下的 10% 涉及敏感数据的场景,我仍然会用传统方式。因为确定性比方便更重要。"
对 OpenClaw 生态的意义
Computer-Use 的出现,让 OpenClaw 从一个"能聊天的 AI 框架"变成了"能做事的 AI 平台"。
此前,OpenClaw 的能力主要停留在对话和文本处理层面。虽然可以通过插件扩展功能,但本质上仍然是"你问它答"的交互模式。
Computer-Use 打破了这个限制。AI 不再只是回答问题,而是可以直接完成任务。
这对 OpenClaw 插件市场的意义是巨大的。据 ClawHub 数据显示,Computer-Use 上线后的一周内,OpenClaw 插件市场的日活跃用户增长了 40%,新增插件数量增长了 60%。
一个能操作电脑的 AI 框架,正在吸引大量原本不属于 AI 领域的开发者——办公自动化工程师、测试工程师、数据分析师、行政人员。
接下来看什么
Computer-Use 一周 2.3 万星之后,三个方向值得关注:
安全机制的完善程度。沙箱模式是否能满足企业级需求,权限控制是否足够精细,操作日志是否可追溯。
社区生态的发展速度。会有多少基于 Computer-Use 的二次开发插件出现,是否会形成类似手机 App Store 的生态系统。
与传统 RPA 工具的融合深度。是替代关系还是互补关系,是否会与 UiPath、Automation Anywhere 等传统厂商形成竞合关系。
Computer-Use 证明了一件事:AI 不再是陪你聊天的工具,它开始替你操作电脑了。
但更深层次的问题也随之而来:当 AI 能代替我们操作电脑时,哪些工作是真的需要人类坐在屏幕前的?
也许答案不在操作能力上,而在于创造性判断和情感连接——这些目前仍然是 AI 难以复制的人类能力。

夜雨聆风