乐于分享
好东西不私藏

豆包开始边看边听边说:AI 助手下一步争的不是智商,是分寸感

豆包开始边看边听边说:AI 助手下一步争的不是智商,是分寸感

豆包开始.边看边听.边说:

AI 助.手下一步争.的不是智商.,是分寸感

最近我一.直在琢.磨一个事,AI 助.手这个赛.道,大家好.像都在卷.谁更聪明.、谁知识面.更广、谁.反应更快.。但说实.话,我总.觉得劲儿使.错了地.方。

字节的.豆包前.几天上.线了一.个叫 SeedRealtime 的.新能力.,我上手玩了.一下,那.种感觉.怎么说呢,不.是“哇它好聪.明”,而是,它.好像终.于学会什.么叫“别.插嘴”了.

就是那种.,你正跟.朋友聊着.天,它安安.静静在旁.边待着,等你.真正需要.它的时候.,它才把.脑袋凑过.来。

真的,就.这一个变化.,我觉得.比它答.对一道奥数.题要难.一百倍.

我们以前.跟 AI 语音.助手打.交道,其实都.在玩一种回.合制游.戏。你问.一句,它答一.句。你停顿超.过 0.5 秒,它就.当你话说.完了,开始抢.答。旁边有.个人喊.你一声,它也.跟着瞎.掺和。

这种体.验,你相信我.,用多了不是.觉得它.傻,是觉得.累。因为你.得时刻绷.着一根.弦,把自己.的话组织.得像个没.有歧义的完.美指令,生怕.它听不懂.、会错意。

这就是所.谓“半双.工”的尴尬.。技术上.解释起来.很简单,就.是像对讲.机,你按着.才能说.,说完松开才.能听。

但我们人.和人聊天是.全双工的,你.可以一边.听一边嗯.嗯啊啊地回.应,对方也能.从你表情.里看出你.是想插话.还是在思考.

以前 AI 做不.到,是因为它.背后的链.路是拼.接起来.的,先有一个.模块把.声音转成.文字,再有.一个模.块去理.解文字,然.后再有.一个模块把.答案念出.来。

信息每传.递一次,就.损耗一点,时.间就多.耗一点。等.它终于.想好要说什.么了,你.早就聊到下.一话题.了。

SeedRealtime 这次做的事.情,我觉得.就是把这三.个模块捏成.了一个。它不.再先听完.、再看懂.、最后开.口,而是.把声音、画.面、文字塞进.同一个.模型里.,让它自.己同时.处理。这就.好像,AI 突然长.出了眼.睛和耳朵.,并且这两个.感官是直.接连着.同一个大脑.的。

我看到他.们有个.演示特别逗.,四个人聚.餐,七嘴八.舌聊去哪儿.玩。这个说怕.热,那个.说对海鲜.过敏。豆包.就在那儿.听着,它.不但能.分清谁.是谁,还能在.最后大家都.没主意的.时候,给出一.份把所.有人那.点小毛病都.考虑进去.的旅行.计划。它.甚至能认.出戴眼镜的. Julia 和浅色头发.的七七.,主动跟.人打招呼。这.不是智.商高,这.是有眼.力见儿。

以下视频来源于
字节跳动Seed
已关注
关注
重播 分享

还有一个让.我印象深.刻的,是在.川菜馆里.帮外国人.点菜。镜头.扫过菜.单,它能直.接指着画.面里的.菜,用英.语解释“鱼.香肉丝里.为什么没有.鱼”,还能把.服务员随.口说的一.句“很下饭”给.翻译过去.。你看,它不.是在处.理文字.,它是在理.解一个活.生生的场.景。

但真正让我.觉得这东.西开始有.“人味儿”的.,是它的沉.默。

以前的 AI,为了.显得自.己很智能.,会拼命证.明自己在.听。你咳.嗽一声,它都.能给你回一.大段。但.豆包这.次,它敢沉默.。在嘈杂的机.场,同伴.闲聊时提.到一个.名字,它没.反应,因.为它知道.那不是跟.它说话。

但当你们聊.着聊着,它从.画面里.扫到一个.网约车指.示牌,会.突然插一句.“上车点往.左前方.走”。这种.主动,不是那.种烦人的弹.窗式提.醒,而是.像一个坐在.副驾的朋.友,看你快.到地方了.,顺嘴提一.句。

这就是.分寸感。它.知道什.么时候该.把自己藏起.来,什么时.候该跳出来.。一个永远积.极、永远.在线、永远想.替你拿.主意的助手.,其实挺吓.人的。你.会觉得.家里多了.个急于表现.的实习生.,而不是一.个能跟你.好好相.处的伙.伴。

这种能力的.背后,是把.判断“谁.在说话.、该不该回.应”这件.事,从外部.的一条.死规则,变成.了模型.自己内部.的持续决.策。它要结.合你的语.气、停顿、画.面里发.生的事,甚.至是你之.前给它.的一个任.务,来综.合判断现在.是不是开.口的最佳.时机。

比如你.在逛博物.馆,提前.跟它说.“看到那.个错金.银铜虎噬.鹿屏座.就提醒我.”,它就能在镜.头扫来.扫去的时.候一直.憋着,直到.那件宝贝.出现,才.出声叫住你.

这其实给所有做AI 产品的人提了个醒

我们之前.总把延迟.当成唯.一的敌人.,觉得只.要 AI 回得.够快,体验.就上去.了。OpenAI 在搞 GPT-Live 的时.候,也是拼了.老命地重.写 Python、魔改.网络协.议,把音.频帧的延.迟压到.极致。但豆.包这次.让我看到,比.“快”更高级的.指标,是.“恰当”。在错.误的时间.点,用极快.的速度说.出一句.正确的.废话,对用.户的打扰.是毁灭.性的。

AI 助手从“工.具”变成“在.场者”之后.,最稀缺的.能力会从.聪明转.向克制.

它看到了.多少,记.住了多少,什.么时候.该提醒.,什么时.候该假装.没看见,这些.边界的设.计,比模型.参数大几.个量级要.重要得多。

当然,这.条路也才刚.刚开始。一个.能持续.看、持续听的. AI,带来的隐.私风险也是.空前的。

它就像你.家那个记忆.力超好又.从不睡觉的.管家,怎么让.它安全.地把听到.的家长.里短都.烂在肚.子里,怎.么在它.过度干预之.前踩下刹车.,这些都.得想清.楚。

好了,说回.豆包这次.更新,我觉得.它就是.给未来.的 AI 助手打.了个样.

以后我.们评价.一个助手.好不好,可.能不是.问它“1+1 等于.几”,而是.看它能不.能在你跟.朋友吐槽.老板的时.候,安安.静静地,把.嘴闭上

就是这样.。 

觉得有用就点个赞,最好三连,让我知道这种从 0 到 1 的拆解对你有用

我是 Symio,一.个在传统工.作之外把脑.洞逐步做.成 AI 产品的.跨界实.践者,我们下.篇见