夜雨聆风学习资料网

ARTICLE · 1013879

豆包手机助手正式出手:AI手机这次不陪你聊天,开始替你操作了

豆包手机助手正式出手:AI手机这次不陪你聊天,开始替你操作了

9 月 14 日,豆包手机助手消费者版本正式发布。首款搭载该版本的努比亚 NaviX Ultra 已开启预约,计划于 9 月 16 日开售。

如果只看发布演示,这又像一场熟悉的“手机里塞进大模型”:能语音问答,能识图,也能搜资料。但这次真正值得看的不是它更会聊了,而是它开始碰手机最核心的那一层——理解你正在看的东西,调用本机信息,并替你把任务往下做。

从聊天工具到行动工具,中间差的可不是一句“帮我操作”。差的是权限、身份、应用边界,以及出了问题以后由谁踩刹车。

不用截图,它先理解你眼前这块屏幕

豆包方面介绍,消费者版增强了屏幕上下文理解。用户不必先截图、复制文字,再切回聊天窗口解释背景;助手可以结合当前屏幕继续回答或处理任务。

官方演示举了一个很具体的例子:相机对着室内环境,用户要求按照装修风格,找一款宽度不超过 1.2 米、价格不超过 1000 元的柜子。助手要同时理解画面、尺寸和价格条件,再去电商平台筛选。

这和传统识图的区别很大。传统识图通常停在“这是什么”;屏幕上下文要求回答“我现在面对什么,以及下一步想做什么”。你在聊天窗口看到一串地址,它应该知道你可能要导航;你在会议记录里看到一项任务,它应该能继续建立待办。后两种只是能力方向,不代表本次发布已经覆盖所有应用和场景,实际范围仍取决于系统、应用接入和版本支持。

屏幕理解也意味着助手能看到更多。页面上的联系人、订单、验证码甚至公司资料,都可能进入上下文。所以“少切一次应用”带来的便利,必须和“它到底读到了什么”一起看,不能只看演示有多顺。

重点不是点得快,而是任务能不能做完

此前手机助手大多是入口:帮你打开应用、查个天气、设个闹钟。豆包消费者版继续保留“操作手机”能力,但官方明确标为 Beta。公开报道显示,它可以通过屏幕自动化完成部分点按、滑动和输入,也能在后台执行已支持的任务。

Beta 这两个字不能略过。图形界面是给人看的,不是稳定接口。按钮换个位置、弹窗多出一层、应用触发风控,自动操作都可能中断。尤其是下单、付款、发送和删除,一次点错并不是“答案不太准确”,而是真实动作已经发生。

因此,消费者版的意义不是宣布手机已经可以完全托管,而是把“替你办事”带进了正式消费产品。它能覆盖多少任务、成功率如何、第三方应用是否配合,还要靠上市后的长期使用检验。发布视频证明了产品方向,不能替代真实环境中的稳定性数据。

本地记忆,让手机里的旧信息重新可找

另一项变化是本地记忆和检索。按照豆包方面披露的信息,在用户授权后,助手可以检索相册、短信、便签、录音、联系人和日历等本机内容。消费者版还升级了录音体验,并接入飞书妙记能力,用户可以对会议或访谈内容继续追问。

用户也可以主动保存记忆:通过语音、三指上滑,或同时按住 AI 键和音量键,把当前屏幕内容保存下来,之后再用自然语言搜索。

这解决的是手机里一个长期存在的笨问题。我们并不缺信息,缺的是记得它在哪。证件有效期也许拍在相册里,某个地址藏在半年前的短信里,会议承诺埋在一小时录音中。统一检索比在六个应用里分别翻找更接近日常需要。

不过,“本地记忆”不应被自动理解成“所有处理永远只在本机完成”。公开信息强调授权、本地数据检索以及“合理必要、用户自主控制”原则,但每一类数据是否上传、保存多久、如何删除,仍应以具体产品隐私政策、系统提示和实际设置为准。用户最好逐项授权,而不是为了省一次点击把相册、短信、联系人全部永久开放。

SAEP:第三方应用终于可以明确说“不”

这次发布中,最不热闹、却可能最重要的是 SAEP。

SAEP 全称为屏幕自动化操作声明协议(Screen Automation Execution Protocol)。豆包同步启动了为期 30 天的规则公示。按公开的协议说明,第三方应用可以声明是否允许 AI 助手在应用内进行屏幕自动化,还能把边界细化到页面和业务环节。

例如,应用可以禁止助手在登录页截图和模拟输入;允许它辅助编辑内容,但不允许完成最终发送或发布;签到、抽奖、秒杀、积分和奖励领取等,也可被列为限制操作。对明确拒绝的应用,豆包手机助手将不执行自动化操作。

这相当于承认一件现实的事:手机属于用户,但应用内的风控、账号体系和业务责任并不只由用户单方面决定。AI 获得用户授权,不等于自动获得银行、电商或社交平台的许可。

根据新黄河对接入文档的梳理,执行判断还要结合助手身份、系统安全基线、应用声明和用户授权;应用声明允许,也不代表能跳过原有业务鉴权。被拒绝后,助手应停止,不得换通道绕过。协议还设计了供第三方查询相关操作记录的机制。

这比简单的“能操作所有 App”少了一点爽感,却更像能长期运行的规则。问题在于,SAEP 目前是豆包提出并公示的协议,不是全行业已经采用的统一标准;公开文档也提示,部分意图级限制的系统强制执行能力取决于目标版本。最终效果要看有多少应用接入,以及限制是否真的在系统层被可靠执行。

一枚带指纹的 AI 键,解决身份但不解决全部风险

努比亚 NaviX Ultra 配有独立 AI 键,并支持指纹鉴权。官方称,完成本人验证后,用户无需再二次解锁,就可调用助手执行相关任务。语音唤醒也针对远场、手机内部噪声和嘈杂环境做了优化。

指纹放在这里不是装饰。过去语音助手最大的问题之一,是“听见一句话”不等于“确认是机主授权”。当助手只能查天气,身份模糊还不算致命;当它能读日历、发消息、跨应用操作,谁发出的指令就必须被确认。

但指纹只能证明按键时有一个通过验证的人,不能替代每一步风险确认。一次指纹验证能授权多长时间?新增收款人、付款、公开发布是否再次确认?后台任务执行到关键步骤时,用户能否接管?这些才决定它能不能进入高风险场景。

比较合理的边界应该是:查找和整理可以少打断,发送、购买、付款、删除等动作需要明确确认;用户随时能中止;系统留下可读的操作记录。豆包方面称已建立 Agent 防护体系,对可操作范围分层、分级管理,但具体场景仍要看真机提示和后续规则。

跟普通人有什么关系?

第一,手机入口正在改变。过去我们先想“要打开哪个 App”,以后可能先说目标,让助手决定调用什么。真正节省的不是几次点击,而是把一串操作压缩成一次交代。

第二,选择手机时要开始看“行动能力”的安全配置。别只问它能不能自动订票,更要问哪些步骤会确认、哪些数据可检索、权限能否单独关闭、日志在哪里、失败后怎么接管。

第三,别把 Beta 当托管。涉及钱、账号、公开内容和不可逆删除,完成后自己核对;初期可以让助手做搜索、整理和填写,最后一步留给人。

豆包手机助手消费者版把 AI 手机往前推了一步:它不再满足于陪你聊天,而是试着进入操作层。可越接近“替你做”,越需要清楚地回答“凭什么做、做到哪一步、谁能叫停”。

这场竞争最后比的不会只是模型智商。谁能让用户放心地交出一部分操作权,又始终保留最后决定权,谁才更接近真正的手机助手。

参考来源

  • 豆包手机助手官方发布视频及产品说明,2026-09-14
  • 环球网、新京报贝壳财经:豆包手机助手消费者版本发布及首款机型信息,2026-09-14
  • 21 世纪经济报道:消费者版能力、Beta 状态与 SAEP 规则公示,2026-09-14
  • 新黄河大鱼财经:SAEP 接入文档、应用声明和操作日志机制梳理,2026-09-14

关注「AI引路者」,每天用大白话帮你搞懂 AI。看完就能用。

📦 回复「AI模板」获取 30 个实用 Prompt 模板,直接复制就能用!

相关学习资料