简单来说Claude的这一次更新就是让AI帮你用电脑

最直观的体验就是Claude可以根据你的指令对微信进行操作
这是我让Claude将我喜欢的音乐分享给微信的朋友,他很快就执行了

甚至有网友在体验之后直言
Claude干掉了OpenClaw

Claude的这次更新主要体现在他可以做到基于GUI进行操作,并不是简单的API调用。这个功能彻底打破了以前的大模型只能通过文本和图像交互的局限。
这意味着Claude模型具备了理解UI界面的能力,对屏幕上的内容进行分析、并通过移动鼠标指针、点击图标,操纵键盘,做到了和人类操作没什么区别跨应用协同能力
也就是说更新后的Claude无论是打开并编辑本地文件、填写复杂的电子表格,还是处理繁琐的专业软件任务,都能自主完成,Claude也将更加深度的进入到用户的工作流中

Claude的这次更新还推出了另外两个功能
一个是远程委派
也就是说你可以直接用手机通过语音和文本对Claude发出指令,让远程的Claude在电脑上自动执行,这个功能的增添让Claude即使远在千里之外也能够自动工作,轻松实现跨设备远程遥控,
还有一个功能就是定时任务
你可以自行设置Claude自动运行的时间,让Claude的到点就开始工作,不再需要人为的手动启动
这两个功能的新增也极大的提高了Claude的工作效率
如何使用这些功能呢
只需将你的桌面端的Claude更新至最新版,再用配对的手机端账号在设置中开启Computer Use的预览权限即可使用。

如果你不想用手机连接操控的话可以直接在Claude desktop里的设置中打开computer use

不过同时你要允许Claude拥有对屏幕的截取和允许其他应用的权限,等你都配置好这些之后你就可以开始使用啦
我在配置好后也体验了一下这个新功能效果着实让我感到震惊
我告诉Claude将我的其中一个GitHub里的项目部署到本地,并且对代码进行重构优化,使内容更完善,并且作为一个skill存在,我能够直接在本地使用。
在我发出指令后Claude立马就接管了我的屏幕
而我什么都不需要做,就静静地看着他自己对电脑屏幕自行截图,再发送到对话中进行分析,继续进行下一步的操作

我就像一个甩手掌柜,默默的看着他完成接下来的所有操作,自己对着以前的功能对着代码重构优化,最后部署到本地与Claude相连接

如果有需要的朋友我把项目链接放在下方了,该项目基本与市面上所有的大模型兼容,大模型可以随时读取并提醒你完成在备忘录中的待办
欢迎大家使用,这是项目的GitHub链接
https://github.com/lpz726/smart-memo
在我简单的对这一功能试试水后,我发现Claude对指令的要求完成度非常高,并且不会随便的像龙虾一样自己随意执行不该执行的操作
像文档,表格或者会议总结的自动生成对Claude来说也已经不再话下了,就比如我让他打开我的WPS,生成一个介绍自己新功能的文档他也是很快就完成了

于是我就想试试能不能用Claude做些其他的任务,
没想到的是在他获取到应用的权限后,他很快就准确地完成了对应的内容,而且在此过程中并没有发生任何的误触或者过多的操作
当Claude完成这一操作时,我已经足够惊讶了
但是没有想到,他对图像的识别和理解也同样准确
我让他帮我总结了过去一小时我的朋友圈发生了什么事情并作出总结,我收到了这样的回答

这一次的更新,在我看来确实是对Claude的一次史诗级加强
真正的做到了,让AI彻底融入你的方方面面,对于你想知道的任何事情
无论是会议总结,聊天记录的筛选,甚至于视频的剪辑,在现在看来或许只需要一个指令,就可以立马实现
这确实体现了大模型公司自己下场做agent的优势,往往能够更加精准的直击用户的需求,同时功能也更加的专业可靠
特别是在大家关注的安全性上有着很大的保障
至少在我用这么久的Claude以来,还没有出现过模型自己做出指令导致数据丢失泄漏的问题
他不会自己偷偷的执行操作,每一步都需要你的授权,这次Computer Use使用下来目前也还没有发现这方面的问题
如果你害怕自己的失误可以将自己不想动用权限的应用加入Claude的黑名单
这样你就不用担心Claude随意申请授权了,即使申请权限,系统也会自动拒绝,让Claude没法访问
用完之后我是真的没想到Claude会有如此大的升级,他基于UGI的操作竟然到了如此准确的地步
对于网友调侃的Claude已经杀死OpenClaw我也不禁生出一丝认同,这看上去确实是对OpenClaw的一次致命打击
不过话说回来
这个新功能虽然好用但是成本也确实不菲
仅仅完整这个小小的任务token就烧不少,特别是跨应用的图像识别,token的损耗如同坐火箭般直线上升,希望随着后面的优化token的损耗能够下降一些吧
目前这些功能已经对所有Claude Pro和Max用户开放,但是只有macOS系统可以使用
好消息是官方表示很快会进行迭代,马上就会支持Windows和Linux系统。

最后,我想说的Claude这次更新的Computer Use功能
实际上也验证了AI操作电脑这一方向的市场价值,这对OpenClaw来说是一次正名,但双方的竞争也就此拉开了序幕,确实让OpenClaw的竞争压力骤增
好在OpenClaw作为开源智能体项目,其核心价值在于让开发者低成本构建自动化 AI 助手,开发者也可以根据自己的需求创建自己需要的功能与Claude有些本质上的区别
不过从绝大多数普通用户的使用意愿来讲,Claude这种“即开即用”的闭源方案确实是最适合他们的选择
Claude似乎并不满足于此,他仍然在保持着超高频率的更新
今天凌晨Claude就又进行了一次更新

对Claude这种高强度的更新我是真的佩服的五体投地,即使处于世界顶尖水平依旧害怕自己掉队,如此强的危机意识,确实值得我们学习
至于Claude是否已经杀死了OpenClaw就看接下来市场的反应了。
夜雨聆风