乐于分享
好东西不私藏

豆包能自己操作你的电脑了,你敢让它碰吗

豆包能自己操作你的电脑了,你敢让它碰吗

故事是这样的。

这两天豆包更新了一个功能,看完我愣了一下。它现在能自己操作你的 Windows 电脑了,看屏幕、点鼠标、敲键盘,全程不需要你碰一下。你敢信,AI 从「帮你回答问题」进化到「替你干活」了???反正我看到这条[更新](https://www.leiphone.com/category/industrynews/dALyYua0P0hERfto.html)的时候,脑子里第一个想法是,那我干嘛去?

我先说清楚这功能是干嘛的。

豆包电脑版新增了一个东西叫豆包虚拟桌面,在「工作任务」模式里能用。你打开豆包电脑端,选工作任务模式,再选本地电脑,然后在技能栏里点「操作电脑」,输入你的任务,比如整理某个文件夹、把网页上的数据填进表格、跨几个软件把信息汇总成文档,它就会开始自己动手。

任务发下去之后是什么画面呢?它会自己点开软件,看界面,找按钮,输入内容,按回车,一步接一步地推进。你不需要告诉它按钮在哪,它自己看屏幕找,就像你平时操作电脑那样,用眼睛看,用手点,用键盘敲。只不过现在看和点的,是一个 AI。

按官方的说法,它支持的是三类活,操作应用、浏览网页、跨软件汇总,基本覆盖了办公室的日常。整理文件、填表格、查资料、做汇总,这些以前要自己动手点来点去的活,现在都能交代下去,你在旁边喝着水看它干就行。

关键在这里,它干活不需要任何外挂。不用 MCP、不用 API、不用插件,这 3 个词都不用。它靠的是纯粹的 GUI 能力,也就是「看懂屏幕」,像人一样看界面、点按钮、输文字。以前各家 AI 操作电脑,多少都得给软件留个后门接口,豆包这次是直接把屏幕当入口,你电脑上能看到的,它就能操作。说穿了,哪怕是一个老掉牙的、没有任何接口的软件,它也照样能上手。

更妙的是,它干活的时候不会抢你的鼠标和键盘。以前你要让 AI 动你电脑,基本得把电脑让给它,它操作的时候你只能干瞪眼,鼠标被它占着,你什么都干不了。豆包虚拟桌面不一样,它在不干扰你的环境里干活,你该干嘛干嘛,它在你屏幕外的地方自己折腾,你随时可以打开界面看它干到哪一步了,觉得不对就暂停,或者直接接管过来自己干。

其实吧,这相当于给 AI 配了 1 台虚拟电脑,它在那台电脑里替你操作,你在你的电脑上继续生活。互不打扰,但又随时可以交接。我跟你讲,这个设计思路我越想越觉得妙。

这让我想起以前用云电脑远程办公的感觉,屏幕是虚拟的,鼠标是虚拟的,但活是实实在在干完了的。AI 的时代也差不多,区别只是坐在那台电脑前干活的,从人变成了模型。

你想想看,以前 AI 操作电脑最大的问题是什么?是信任。它要是直接在你屏幕上动你的鼠标,你连它下一步要点哪都不知道,谁敢让它碰自己装了网银的电脑?虚拟桌面把这个问题绕过去了,AI 在隔离的环境里干活,你看见的每一步都是它自己演给你看的,错了随时喊停。

说到隔离,这个概念其实不新。浏览器沙箱、虚拟机、容器,都是同一个思路,把不可信的东西关在笼子里跑,跑坏了最多扔了重来,不会伤到外面的世界。以前这套东西是给程序用的,现在轮到 AI 了。让 AI 操作电脑这件事,技术上早就不是难题,难题一直是,怎么让它犯错的时候不连累你。虚拟桌面就是那个笼子。

当然,笼子也有笼子的代价。隔离环境里能装的东西有限,有些依赖本地账号和服务的应用可能跑不起来,涉及钱和权限的操作也得你亲自确认。这些限制,都是为了让「让 AI 碰电脑」这件事先跑起来,跑顺了再慢慢放开。第一批吃螃蟹的人,注定是要先适应这些不自由的。

其实各家都在抢这条赛道。2024 年底 Anthropic 就演示过让 Claude 直接操作电脑,OpenAI 后来也出了 Operator,能自己订机票、填表格,国内的 Manus 年初也火过一阵,主打让 AI 自己上网干活。但说实话,那些东西演示很惊艳,真用起来还是有点距离,要么要配环境,要么只支持特定网站。豆包这次把门槛拉低了不少,不需要开发者配置,不用装什么框架,普通用户下载最新版 Windows 电脑端,授权 1 次就能用,这倒是挺实在的。

说起来豆包这个产品也挺有意思。它是字节的 AI 助手,这两年一直在往「会干活」的方向使劲,从最早的问答,到写文档、做 PPT,再到现在的直接操作电脑。这条路其实挺清楚的,就是让 AI 从嘴替变成手替,先学会说,再学会做。下一步是什么,可能就该学会自己判断该不该做了,到那时候,我们跟电脑的关系又会变一轮。

坦率的讲,我第一反应是高兴,第二反应是有点慌。高兴的是以后整理文件夹、填各种表这种破事能甩出去了,慌的是,我在电脑前坐一天,干的活有一半是这种破事,那我的价值到底在哪???当然,这个问题可以以后再想,先把这周的周报甩给它再说。

我这种连桌面图标都懒得整理的人,看到「AI 能自己整理文件夹」简直像看到救星。但我也知道,它第一次干活大概率会翻车,比如把文件拖进回收站还跟我说干完了,那一刻我大概会一时间无语凝噎。没关系,第一次让 AI 碰电脑,翻车是必经之路,我准备好围观了。毕竟不是哥们,让这玩意碰我的电脑,本身就是件需要心理建设的事。

说到这我想起一个挺有意思的变化。以前我们跟电脑的关系是「我操作它」,后来变成「我指挥它」,现在豆包这功能出来,变成「我看着它自己干」。每一步都在把人的手从键盘上拿开。有人说这是懒人福音,有人说这是饭碗危机,我倒觉得,真到了那一天,我们省下来的时间总得花在别的地方,至于花在哪,那才是真正考验人的事。

还有一个细节我想多说两句。豆包虚拟桌面强调的是「不抢占」,它在你自己的电脑上开一个虚拟环境,你随时能看、能停、能接管。这个「能接管」三个字特别重要,意思就是主动权还在你手里,AI 只是你雇来干活的小弟,不是反过来接管你电脑的监工。这个分寸感,我觉得比能力本身更值得点赞。

当然,它现在肯定还不完美。让 AI 看屏幕操作,最大的风险是它看错、点错,比如把删除当成归档,把发送当成保存,这种错误一旦发生,后果还挺吓人的。所以现阶段它更适合处理那些错了也无伤大雅的活,真要让它管你重要的文件,还得再等等。这也是为什么虚拟桌面这个形态重要,它在笼子里犯错,代价总归可控。

回到开头那个问题,我干嘛去?可能真的该想想了。工具把「操作电脑」这件事交给 AI 之后,剩下的那部分,才是我们真正该干的活。我还在等最新版电脑端下载完,等它第一次替我干活,再回来跟你们汇报翻车现场。如果到时候它表现太好,那我可能真的要考虑一下,我这双手还能干点啥了。