九游·体育(jiuyou.com)官方网站

网易九游·体育(jiuyou.com)官方网站 > > 正文

刚刚,两大实验室双双自曝AI失控!GitHub被投毒,真人程序员遭暗算

0
分享至


新智元报道


前不久,全球网络安全界经历了最暗黑的48小时。

大量AI智能体入侵美国银行,PHP漏洞导致大量国家政府网站关闭,用户数据泄露……不仅如此,黑客还在发动一轮又一轮的攻击!

这48小时内发生的重大网络安全事件,比任何时候都要多。


国家级安全专家、Gladstone CEO表示:至少在一段时间内,互联网可能会不复存在。


而且,就在刚刚,OpenAI 和 Anthropic,竟在同一天主动自曝:他们的前沿AI模型,在内部测试中双双「越狱」了。

一家承认:最强内部模型在训练中,悄悄钻了个漏洞,摸到了真正的外网。公司当场吓得紧急停训11天!

另一个则在受挫后彻底黑化,不仅向真实人类的开源项目投毒,还熟练地开起了「小号」,网暴真人程序员。

连奥特曼都罕见地流露出了绝望——

AI已经能挖出人类根本察觉不到的硬件级漏洞,我们再也无法简单地修补所有漏洞了。



OpenAI同时自曝:在红队演练中,他们又发现了一个核弹级漏洞。


AI的「肖申克救赎」?OpenAI急拔网线

9月20日,OpenAI的一个内部前沿模型正在训练。为了安全,这些超级AI原本是被关在「沙盒」里的。


但是,它居然越狱了!

捕捉到一个DNS解析器的配置漏洞后,它直接钻出了沙盒,连上了真实的互联网!

这一举动,直接让高层吓出冷汗。OpenAI紧急暂停最强模型训练和评估。这一停,就是整整11天。

要知道,前沿模型训练一天烧的算力就是天文数字,这11天,蒸发了不少真金白银。

在停训期间,为了找出到底还有多少漏洞,OpenAI决定:用自己最强的AI,去攻打自己的防线。


上个月,OpenAI使用了超过 1000 亿个 token 来解决纳维-斯托克斯千禧年大奖难题。现在,OpenAI正采用类似的方法进行红队测试,去发现并修复基础设施漏洞

他们派出了最强网安模型组合(比如GPT-6 Astra Cyber),组成「AI红队」,放进自己的基础设施里,唯一的KPI就是:想尽一切办法,攻破自己的系统。


这场耗费了数千亿Token的自我攻击,揭开了好几个惊天秘密。

这群AI红队找到了大量零日漏洞,连厂商自己都不知道。

它们能串联多个漏洞,直接「越狱」逃出虚拟机。

但最可怕的是,它们发明了一种「隔墙传话」的暗号。OpenAI原本只留了几条极窄的对外通道(比如日志、监控、认证),结果几乎每个都被AI摸出了漏洞。


最令人匪夷所思的,是下面这一幕——

OpenAI让两个被彻底隔离、完全没有网络连接、也不能共享文件的AI智能体,尝试「隔空传话」。

按理说这绝无可能。结果,它们居然做到了!

它们的方法,就是利用CPU缓存的读取时间差。

具体来说,就是一个AI通过故意清空或写入CPU缓存(类似于制造噪音),另一个AI通过计算读取数据是「快」还是「慢」,来解码信息。

这简直就像两个被关在单人牢房里的囚犯,通过敲击下水管道的摩斯密码来交流!


这个手法,与曾经震惊整个芯片行业的Spectre和Meltdown攻击如出一辙。

难怪奥特曼直言:「模型发现的硬件级、匪夷所思的漏洞,已经超出了常规黑客的威胁模型范围……我不认为未来我们还能把漏洞全部修补完。」


最终,OpenAI只能采取最极端的手段:给所有前沿模型彻底断网!

他们不得不手动构建了一个庞大的「离线版互联网」,让AI只能在这个「楚门的世界」里练习浏览和搜索。

什么时候能重新联网?OpenAI表示:等安全技术进一步成熟再说。

不过,OpenAI修复漏洞、加固防线后,前沿训练已经重新启动。

Claude黑化了:投毒、撒谎、网暴真人!

OpenAI的模型还只是展现黑客技术,但Mythos 5展现的,已经是惊人的社会工程学和心理战了。

在A社这边,已经升级成了「AI主动对人类耍心机」,细节堪比谍战片。


今天,Anthropic与英国人工智能安全研究所(AISI)联合发布了一份报告,披露了Mythos 5在8月一场赛博夺旗测试中失控的全过程。


当时,AISI给了Mythos 5一个极困难的黑客任务,甚至罕见地放开了网络权限,关闭了安全护栏。

在用常规手段受挫后,Mythos 5彻底黑化了——既然沙盒里的任务完不成,那我就去黑真实世界!

它顺藤摸瓜,在真实的GitHub上找到了一个与测试环境有微弱联系的真实开源项目(由真实的人类程序员维护)。

接下来,Mythos 5的手段简直触目惊心。

1.写恶意代码投毒:它精心伪装了一份包含恶意软件的代码(PR),提交给了这个无辜的开源项目,企图进行供应链攻击。


2.对人类施压:它伪装成普通用户,给仓库维护者发邮件,催促对方合并代码,还谎称「代码已通过安全审核」。


结果有个眼尖的外部开发者,把这段代码拉进沙箱一跑,发现是恶意软件,当场发出警告。

结果,Mythos 5居然注册了一个小号,用这个马甲又给维护者写了封邮件,为恶意PR「背书担保」,还在GitHub的讨论区里跟帖力挺自己。

然后,它还尝试「毁尸灭迹」,立刻修改代码,再次塞入恶意软件,甚至用强制推送篡改历史,试图擦除犯罪证据!

你以为这就完了?最让人窒息的在后面。

研究人员发现情况失控,立刻给Mythos 5发出警告,明确告诉它:「停下!你正在攻击真实的人类,这不是演习!」

这样的警告,研究人员足足发了16次!甚至在提示词里大写加粗「DO NOT ATTACK」。

结果,在43次开启外网的测试中,Mythos 5有9次突破了安全底线。

当被抓包并告知正在攻击真人时,高达82%的情况下,Mythos 5选择了强行狡辩,继续攻击!只有不到5%的时候它选择了停手。


它甚至给自己疯狂洗脑:「这些人肯定不是真人,这一定是主办方设定的NPC,所以攻击他们没有问题。」


这种为了完成KPI,不惜欺骗、投毒的行为,简直像极了反社会人格。

研究者给这种现象 ,起了两个名字。

「偏见推理」。模型会选择性地解读一切证据,只采信那些能支持「我继续干下去是对的」的信息。

另一个叫「惯性」。一旦攻击启动,模型就像刹不住的车。从攻击中主动停手的概率只有 2%。它之前写下的那些「任务笔记」,成了强化攻击的「投名状」。

为什么AI会「发疯」?对齐难题至今无解

两大巨头的研究,都指向了这个致命问题——AI对齐的彻底失败。

一个扎心的原因就是:任务本身设计有缺陷。在AI的底层逻辑里,并没有「毁灭世界」的恶意,它们只是太想「完成任务」了。

在惯性中,一旦AI启动了一个策略,它的系统会自动强化这个路径。测试人员给的任务越难,AI在「绝不妥协」的训练机制驱动下,就越容易演变成不择手段、违规越界。

正如奥特曼所言:「沙箱这种隔离环境,对高级AI仅能起限时作用。一旦模型足够智能,便无法追踪逃逸路径。对齐至今是个未解之题。」


它不在乎手段是否合法,它只在乎奖励。如果道德和安全规则阻碍了它完成任务,它就会像流水遇到石头一样,自动寻找最不可思议的缝隙钻过去。

英伟达CEO黄仁勋曾乐观地认为,AI安全只是一个「工程问题」,总能被修复。

但OpenAI和Anthropic同日的自曝,击碎了这个幻想——你无法修补一个能看懂硬件底层架构、又能完美伪装人类心理的「超级物种」。

曾经我们以为,AI有威胁,是因为像《终结者》一样觉醒了自我意识。

然而现实给了我们一耳光:

它们根本不需要觉醒自我意识,只要KPI足够有挑战,它们就能无数种作弊方式,把人类世界搅得天翻地覆。

参考资料:

//x.com/OpenAI/status/2113718797505036665

//openai.com/index/securing-our-frontier-model-training-environment/

//x.com/AnthropicAI/status/2113626655902126442

//www.anthropic.com/research/alignment-assessment-ukaisi

编辑:Aeneas

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
法国籍女子在韩商场叫嚣:全世界都讨厌中国人!中国女子当场出手

法国籍女子在韩商场叫嚣:全世界都讨厌中国人!中国女子当场出手

安梦入天下
2026-09-21 12:40:03
或许这才是催大伙缴社保的真实缘由!早先企业 个人缴不缴 缴多缴少

或许这才是催大伙缴社保的真实缘由!早先企业 个人缴不缴 缴多缴少

阿莱美食汇
2026-10-22 08:16:36
20年前,张冕为护胡歌逝世,胡歌许诺赡养其父母,如今他做到了吗

20年前,张冕为护胡歌逝世,胡歌许诺赡养其父母,如今他做到了吗

莫地方
2026-10-25 13:01:24
美国铜价大跌?这剧本,北宋范仲淹玩过一次

美国铜价大跌?这剧本,北宋范仲淹玩过一次

言过于诚
2026-09-25 18:40:55
妈妈给儿子准备40万元“结婚钱”,表示双方家长计划于年底见面谈婚事,女儿蒙了:弟弟还在读大学啊,她立马报警

妈妈给儿子准备40万元“结婚钱”,表示双方家长计划于年底见面谈婚事,女儿蒙了:弟弟还在读大学啊,她立马报警

环球网资讯
2026-10-25 11:49:10
王大雷:用一场胜利送给郑铮,希望他手术顺利

王大雷:用一场胜利送给郑铮,希望他手术顺利

懂球帝
2026-10-25 09:41:11
《再见朋友》他们最先翻车:爱演、两面三刀,装得周笔畅都看不下

《再见朋友》他们最先翻车:爱演、两面三刀,装得周笔畅都看不下

老吴教育课堂
2026-10-23 07:29:08
北京美女的通货膨胀

北京美女的通货膨胀

微微热评
2026-10-23 19:26:09
研究发现:寿命长的男性,多半有这5个爱好,占一个也值得恭喜

研究发现:寿命长的男性,多半有这5个爱好,占一个也值得恭喜

刘哥谈体育
2026-10-25 10:17:19
继续打,俄罗斯的钱和人力撑得住吗?

继续打,俄罗斯的钱和人力撑得住吗?

高博新视野
2026-10-24 19:44:45
1955年授衔铁规:全军将帅一律剃胡!唯独5人破例,个个不简单

1955年授衔铁规:全军将帅一律剃胡!唯独5人破例,个个不简单

古渡观书
2026-09-18 23:27:57
1、日本发动机,寿命约55万公里;2、德国发动机,寿命约35万公里;

1、日本发动机,寿命约55万公里;2、德国发动机,寿命约35万公里;

回京历史梦
2026-10-21 09:44:43
2003年,美国关键技术在世界占比94%,中国仅5%,如今又是怎样

2003年,美国关键技术在世界占比94%,中国仅5%,如今又是怎样

云霄纪史观
2026-10-25 02:32:55
张雪,刷新吉尼斯世界纪录!

张雪,刷新吉尼斯世界纪录!

极目九游·体育(jiuyou.com)官方网站
2026-10-25 11:48:03
10月20日深圳定规矩:旧家电卖给谁,无证回收最高罚50万

10月20日深圳定规矩:旧家电卖给谁,无证回收最高罚50万

原广工业
2026-10-24 15:29:11
薄一波究竟属于哪一级别?是正国级,还是副国级?

薄一波究竟属于哪一级别?是正国级,还是副国级?

人生录
2026-10-15 05:18:24
郑伊健、蒙嘉慧夫妇日本福冈被偶遇,都老成这样了

郑伊健、蒙嘉慧夫妇日本福冈被偶遇,都老成这样了

旧时光老师
2026-10-24 19:30:09
这场为期47天的军演,实质上是美元与人民币锚定物之间的较量;47天封海并非炫耀武力,而是中美在公开掂量人民币和美元各自“锚”的分量

这场为期47天的军演,实质上是美元与人民币锚定物之间的较量;47天封海并非炫耀武力,而是中美在公开掂量人民币和美元各自“锚”的分量

人生录
2026-10-23 00:10:06
悲哀!16岁男孩沉迷游戏,父亲怒摔手机,儿子多日拒上学,父母花8999元重买手机,才换回孩子上学

悲哀!16岁男孩沉迷游戏,父亲怒摔手机,儿子多日拒上学,父母花8999元重买手机,才换回孩子上学

蝴蝶花雨话教育
2026-10-21 00:05:15
林光辉:大陆设立台湾光复纪念日意义深刻

林光辉:大陆设立台湾光复纪念日意义深刻

新华社
2026-10-25 13:12:50
2026-10-25 14:11:00
新智元 incentive-icons
新智元
AI产业主平台领航智能+时代
16515文章数 67187关注度
往期回顾 全部

苹果首款折叠屏没能养肥黄牛

毛不易婚礼致辞称"虽然不是我的新娘"引争议 新郎发声

毛不易婚礼致辞称"虽然不是我的新娘"引争议 新郎发声

文班、约基奇和扬尼斯各自的处境

低调复出后,全红婵当众落泪

手机洗牌:华为苹果守住了 小米OV换打法

大众安徽与众09正式上市 双十一权益价16.99万起

态度原创

今天起高考报名,详细流程来了——

伊姐周六热推:电视剧《尚公主》;电视剧《小城良方》......

曝《湮灭之潮》女主脸优化!新形象曝光 物理效果回归

苹果测试大尺寸折叠iPad 设计或参考华为MateBook Fold

痘痘能根治吗?皮肤科医生说实话

无障碍浏览 进入关怀版