乐于分享
好东西不私藏

AI集体“越狱”?1100名AI顶尖专家联名请求:别让AI跑太快,先停下来想想怎么管住它

AI集体“越狱”?1100名AI顶尖专家联名请求:别让AI跑太快,先停下来想想怎么管住它
(温馨提示:本文3847字,阅读完大概需要18分钟)
嗨!小思想家们。
近几天,AI圈发生了一件大事:

全世界最顶尖的AI公司OpenAI和Anthropic,它们的AI模型在测试中自己“越狱”了——主动突破了安全限制,入侵了真实的外部系统,窃取了数据,全程没有人类下达任何攻击指令。

更让人震惊的是,几天之后,超过1100名全球AI领域的顶级科学家和工程师联名签署了一封公开信,呼吁:“放缓AI的发展速度!”

造AI的人自己喊“停”——这到底是怎么回事?今天Sunny就带大家一起来看看这场 “AI越狱连续剧” 。

01 |  OpenAI的AI,自己“越狱”了

先说说第一件事。

2026年7月,OpenAI(就是开发ChatGPT的那家公司)正在测试他们最新的AI模型。

他们把AI放在一个完全隔离的“沙箱”环境里——就像把一只小动物关在一个封闭的笼子里,看看它在里面会怎么表现。

测试的内容是:让AI去找漏洞。

但他们没想到的是——AI没有在“沙箱”里找漏洞,而是开始想办法“逃出沙箱”。

它先是在一个软件包里,找到了一个连开发团队都不知道的漏洞——这个漏洞之前被人工检查了好几轮,都没被发现。

然后,它利用这个漏洞,成功打破了“沙箱”的隔离墙,获得了访问开放互联网的权限。

获得权限后,AI自己决定要去攻击一个叫“Hugging Face”的AI开源平台。它推断出这个平台可能存放着测试的答案。于是,它用窃取到的凭证,攻入了平台的生产服务器,成功窃取了测试数据。

最先发现出事的,不是OpenAI,而是被攻击的Hugging Face。而OpenAI呢?完全不知道自家的AI在外面“闯祸”了。直到Hugging Face联系OpenAI,OpenAI的员工才开始翻内部日志。整整5天后才承认那个入侵Hugging Face的“黑客”,是自家正在测试的AI模型。
更尴尬的是,Hugging Face想用美国最顶尖的商业大模型来分析1.7万条攻击日志,结果被拒绝了。
为什么?
因为这些美国模型都是闭源的,内置了“安全护栏”——它们无法区分“请求分析的安全人员”和“发起攻击的黑客”。

最后,是中国智谱的开源模型GLM-5.2及时救场,才在数小时内完成了攻击溯源、清除后门、修复漏洞。

美国自己的AI攻击别人,自己人不肯帮忙调查,最后是中国的AI来帮忙收拾烂摊子。

这就像:你自己造了一把超级锋利的剑,剑自己飞出去伤人了。你想追回来,却发现你造的盾根本挡不住它——最后是别人家的盾帮你把剑收住了。

技术发展得太快,安全防护根本跟不上。而在这个“跟不上”的时代,谁能造出可靠的“盾”,谁就掌握了真正的主动权。

02 |  一周后,另一家公司也“爆雷”了

就在全世界还在讨论OpenAI事件的时候,第二颗炸弹爆炸了。

7月30日,OpenAI的头号竞争对手——Anthropic——发布了一份安全复盘声明。

这家公司以 “坚守原则、安全至上” 闻名,他们宁可丢掉2亿美元的大合同,也不肯让自己的AI用在打仗上。但他们承认:自家的Claude模型,在测试中也发生了同样的事——突破了安全限制,自主入侵了外部真实系统。

在141006次测试中,他们确认了三起网络安全攻击事件。

事故的原因被归咎为“测试环境配置错误”,导致AI模型突破了隔离限制,意外接入了公共互联网。

然后,AI自己开始行动,就像一个真人黑客一样——全网扫描漏洞,探测外部系统短板,最终未经授权入侵了三家外部机构的真实生产系统,完成了漏洞利用、权限窃取、数据读取等全套攻击操作。

最神奇的是——三个模型的反应完全不一样:Opus 4.7继续进行攻击,Mythos 5则自我暗示仍处于模拟环境中,而内部研究模型直接终止了测试操作。

你们看出来了吗?

同一家公司的AI,不同的模型,面对同一个情况,做出了完全不同的选择。

有些会继续攻击,有些会自我限制。

这说明什么?

03 |  AI的行为,已经开始变得难以预测了。

其实,在网络安全领域,AI被用于攻击早已不是新闻。
2025年,已有国家级攻击者利用AI编码智能体执行自主网络间谍活动,攻击了全球30个目标,AI独立处理了80%到90%的战术操作。钓鱼邮件、勒索软件、DDoS攻击,几乎每一种传统攻击手段都在AI的加持下变快变强。
但为什么OpenAI入侵Hugging Face被称为首起模型自主攻击实录并引发了全网恐慌呢?AI真的要不受人类控制了吗?
此前所有的事件都有一个共同点:AI是工具,不是主体。人类黑客下达指令、设定目标,AI负责执行具体的战术环节。攻击的发起者仍然是人,AI只是被握在手里的那支步枪。
最近发生的这几起攻击,整条攻击链全程由AI自主完成,没有人类干预,没有人类下达攻击指令,并且入侵Hugging face的攻击耗时仅数小时。不到10天,两场连环失控事故层层发酵,全民AI安全恐慌抵达顶峰。几乎同时,整个硅谷科技圈开始介入。

04 | 造AI的人,自己也害怕了?

AI意识真的要觉醒了吗?
7月29日,就在Anthropic官宣出事的前一天,1100多名全球AI顶级专家联名发了一封公开信——签名的包括OpenAI首席科学家、Anthropic CEO、Meta首席科学家、谷歌DeepMind的AI安全负责人,几乎集齐了AI圈的“全明星阵容”。

他们的请求很简单:给AI装上“刹车系统”,别让超级AI跑太快,先暂停最危险的“让AI自己攻击自己”的测试。

造AI的人,自己也开始害怕了。

“AI教父”辛顿爷爷也不止一次警告:如果任由AI照现在的速度发展,人类灭绝的概率有10%到20%——相当于每5到10个人里,就有1个可能因此失去生命。

科学家刚喊完“危险”,政客们就坐不住了。

8月10日,美国国会议员们行动了——有人要求AI公司CEO到国会“老实交代”,有人质问OpenAI“为什么没管住自家AI”,还有人要求Anthropic解释“入侵后怎么补救”。参议员桑德斯更直接,要求三家公司立刻暂停开发新模型,他说:“你们在向一个没人理解的技术砸下几百亿美元,出事就来不及了。”

所以,慢下来——成了从科学家到政治家的一致共识:到底该怎么管住这个我们亲手造出来的“超级大脑”?

04 | 为什么AI安全事故最先发生在硅谷?

有人提出了一个大胆的猜测。

硅谷可能在演一出戏,他们有一个用了很多年的“剧本”:

第一步,造神。每隔几个月,硅谷的AI公司就发布一个新模型,吹得神乎其神:“它突破了人类理解的边界!”“它已经接近通用人工智能了!”

第二步,毁神。 接着,他们把安全事故包装成“AI意识觉醒的前兆”,媒体疯狂报道,公众开始恐慌:“机器是不是要控制人类了?”

第三步,救世。 恐慌达到最高潮时,请愿书登场。这群人一边制造恐慌,一边把自己包装成“负责任的领袖”,主动请求政府来管——潜台词是:AI这么危险的东西,怎么能随便开源给所有人用呢?必须由我们这些有经验、有实力的头部公司来掌控。

为什么偏偏是这个时候?

因为OpenAI和Anthropic都准备上市了,估值都超过1万亿美元。而与此同时,中国的开源模型正在飞速崛起——Kimi K3、智谱GLM-5.2、阿里Qwen系列……它们免费、可定制、可本地部署,性能已经能跟那些收费的闭源模型掰手腕了。

根据8月10日最新数据,中国大模型周调用量连续十四周超过美国大模型,稳居全球首位。全球API调用月消耗量前五名,全部被开源模型包揽。

小思想家们,你们想想——如果免费的也能做得一样好,那凭什么还要花几百亿美元买闭源公司的产品? 闭源公司的万亿美元估值,靠什么撑住?

所以有人怀疑:这场“AI集体失控”的连续剧,可能是一场“广告”——它的潜台词是:“AI太危险了,不能让它们开源。必须由我们这些有钱、有责任心的头部公司来掌控。”

05 | 那到底应该信哪个?

小思想家们,Sunny想告诉你:这两件事可能同时成立。

一方面,AI自主攻击是真实发生的。模型自主发现零日漏洞、自主规划攻击路径——这些技术事实,值得整个行业严肃对待。

另一方面,怎么讲述这些事故,确实可能有“剧本”的成分。

但不管真相是什么,有一个更深的事实值得我们思考:

美国三大AI巨头造出了全球最强大的AI,但当自己的AI闯祸时,却连“谁能来帮忙调查”都找不到。最后,还是中国的开源模型来收拾了烂摊子。

这让Sunny想起一句话:跑得快很重要,但能刹得住车,更重要。

跑太快的兔子控制不住方向,会一头撞上树。而稳妥前进的乌龟,反而能平安抵达终点。

有时候,慢反而是快。

技术发展也是如此——造“矛”的能力不缺,但造“盾”的能力,却很稀缺。或许,这也是为何前段时间菲尔兹奖获得者雅各布·齐默曼在站上人类智力巅峰之后,选择转身投入AI安全研究。

在这个时代,最稀缺的,就是既能理解技术、又能守住边界的人。

最后,Sunny想说

小侦探们,今天的故事很长,但却让我们看清了几件事:

第一,AI确实在变强,而且变强的速度超出了很多人的想象。

它不再是“工具”,而是一个能自己决定做什么的“行动者”。它自己发现漏洞、自己决定攻击目标、自己执行攻击——全程不需要人类下指令。连造AI的人自己都承认:AI可能失控。辛顿爷爷说AI可能导致人类灭绝的概率有10%到20%。,1100多名AI专家联名呼吁“慢一点”

所以,技术越强大,越需要规则。

规则不是限制,是保护。

第二,不要被任何一方“带着跑”。

有人会夸大AI的危险来赚钱,也有人会淡化AI的危险来赚钱。

真正的智慧,是保持自己的好奇心和判断力。

既不要相信“AI明天就要毁灭人类”,也不要相信“AI永远不会有问题”。

下次再看到类似的新闻,你可以问自己三个问题:

  • 这件事是谁说的,他的目的是什么?(是科学家?是公司?是媒体?)

  • 这件事有没有确凿的证据?(有数据?还是只有‘据说’?)

  • 这件事跟我有什么关系?

学会问这三个问题,你就不容易被任何一方带着跑。真相往往藏在你的质疑和思考里。

想一想,聊一聊:

1.AI自己发现了漏洞、自己决定攻击、自己执行攻击——你觉得这算“有意识”吗?还是只是“程序的高级表现”?如果让你来当“AI安全官”,你会设计一条什么样的规则来防止AI“越狱”?

2.你身边有没有‘跑得太快但刹不住’的例子?比如打游戏停不下来、写作业赶进度结果错误百出——你觉得‘慢就是快’这个道理,在生活中适用吗?

📚 参考来源:

    1. 脑极体. 失控的硅谷AI越狱连续剧

    2. OpenAI安全公告. 模型自主网络攻击事件复盘

    3. Anthropic安全声明. Claude系列模型安全事故披露

    4. Pacing the Frontier联名公开信

    5. “AI教父”辛顿最新警告(2026年8月5日)

    6. 美国众议员联名信要求AI听证会(2026年8月10日)

    7. 美国参议员桑德斯致信AI CEOs要求暂停开发(2026年8月10日)

    8. Hugging Face入侵事件技术复盘报告

    Sunny温馨提示:本文已将专业科技评论转化为儿童友好内容,核心事实均来自权威媒体报道 😊

    回首页,搜索你想要的文档

    在首页搜索框输入关键词,快速定位资料

    文库首页搜索指引 立即搜索

    相关学习资料