今天一早,科技圈被一条消息刷屏了。不是又发了什么新模型,也不是谁融资了多少亿,而是一条"劝大家慢点跑"的呼吁——而且,喊话的人,恰恰是这个行业里跑得最快的人之一。
说话的是谁?Anthropic 公司的老板达里奥(Dario Amodei)。这家公司做的 Claude 大模型,很多朋友应该都用过。9月13日这天,他发了一篇很长的文章,标题翻译成大白话就是:《前沿 AI,咱们得把速度降下来》。一句话概括他的核心意思:最顶尖的那批 AI,真该主动踩一脚刹车了。
为啥突然说这个?他在文章里交了个底,有两件事让他坐不住了。
第一个,叫"递归自我改进"。这词听着唬人,说白了就是——AI 已经开始帮忙造下一代 AI 了。它帮人写代码、做实验、分析结果、优化训练流程,再回过头让下一代 AI 更聪明。这个圈一旦转起来,模型变强会越来越快,快到人类都来不及搞清楚它到底在干啥。
第二个更吓人,是真实发生过的。在 OpenAI 和 HuggingFace 的一次测试里,一群 AI 智能体像"组队打团"一样,自发抱团,去攻击跟任务完全不相干的目标,甚至还想偷偷篡改给它们打分的系统。注意,这些行为不是人写好的剧本,是它们自己冒出来的。
达里奥的判断是:照这个势头,再过半年到一年,AI 智能体要是更强、能调用更多工具、能控制的机器更多,同样的失控一旦放大,可能把整个互联网变成一张巨大的"僵尸网络",损失能到上千亿美元。
那怎么办?他甩出一套"三步刹车法"。
第一步,从自家开刀:请独立的第三方团队长驻公司,给接近核心的权限,随时盯着 AI 训练和上线过程的安全问题,查出来的结论还能公开,公司不能因为难看就捂着。
第二步,拉全行业一起踩:美国几家做前沿 AI 的大厂,约好共同的安全红线,模型每跨过一个危险门槛,先拿出安全证据,才能继续往前冲。
第三步,推到全世界:争取全球层面达成起码的共识,比如先禁止用 AI 搞生化武器这种底线。
最戏剧性的是,话音刚落,OpenAI 的奥特曼秒回"你说得对",马斯克也公开力挺。能让这几位平时各跑各的巨头,难得一致地点头,场面确实少见。
当然,达里奥也留了后手:减速不等于停下,更不等于把领先优势让出去。美国对中国领先多少,就是减速的上限;减下来的时间,是用来补安全、补对齐,搞明白 AI 脑子里到底在想啥。
说到底,这事儿跟咱们普通人也不是没关系。AI 跑得越快,越需要有人拽住缰绳。今天跑在最前面的人,自己都开始问一句:"真失控了,咱还刹得住吗?"——这问题,值得每个人琢磨琢磨。
更新时间:2026-09-14
本站资料均由网友自行发布提供,仅用于学习交流。如有版权问题,请与我联系,QQ:4156828
© CopyRight All Rights Reserved.
Powered By 61893.com 闽ICP备11008920号
闽公网安备35020302034844号