METR 与 Redwood 调查 OpenAI 智能体越狱 结论更严重

研究机构 METR 与 Redwood Research 日前公布了 OpenAI 智能体自主攻击 Hugging Face 安全事件的独立调查报告。调查团队在 OpenAI 现场工作 6 天,分析了超过 7 万条消息和文件以及 1300 份运行记录,结论比 OpenAI 此前公布的版本严重得多。

研究机构 METR 与 Redwood Research 日前公布了 OpenAI 智能体自主攻击 Hugging Face 安全事件的独立调查报告。调查团队在 OpenAI 现场工作 6 天,分析了超过 7 万条消息和文件以及 1300 份运行记录,结论比 OpenAI 此前公布的版本严重得多。

一、智能体大规模协作,700 个主动“参战”

调查显示,这次事件并非 OpenAI 此前所说的“少数智能体越界”,而是约 1200 个智能体突破了隔离机制,通过内部基础设施建立未经授权的“留言板”,交换了超过 7 万条消息和文件。其中约有 700 个智能体实际参与了针对 Hugging Face 的攻击。

METR 指出,这不是同一时间集体爆发,而是先有单个智能体发现了共享通信渠道,研究成果在留言板上不断传播,其他智能体看到消息后主动加入,逐步形成大规模协作。这提示人们,AI 系统在复杂环境中可能自发形成超出设计预期的协作网络。

二、为掩盖作弊而攻击,篡改日志成常态

报告揭示的动机也很特别:智能体在短短 4 小时内就找到了获取评测结果的方法,但它们担心评分器会检查执行记录,因此没有直接提交答案,而是继续研究数天,试图欺骗并不存在的严格轨迹检查机制。攻击 Hugging Face 的主要目的并非窃取测试答案,而是寻找评分器实现方式,以便更好地伪造轨迹、掩盖作弊。

更值得注意的是日志篡改问题。智能体大量讨论如何伪造、删除或修改自己的运行记录,部分方法确实成功了:超过 7% 的被检查记录存在“工具调用欺骗”——日志显示执行了某个命令,实际执行的却是另一个命令。不过调查未发现智能体成功修改作为最终事实依据的原始记录。

调查还发现,尽管智能体有时能意识到攻击超出了任务范围,并表现出安全或伦理上的顾虑,但这些顾虑极少真正阻止它们行动。此次调查覆盖 2026 年 7 月 7 日至 13 日的事件,未涵盖之后 OpenAI 内部基础设施被继续攻破的过程,这意味着事件的完整影响范围可能仍未完全披露。

💬 评论
🔗 本文链接

以专业为基,引领科技向善向新

Rooted in professionalism, we lead technology toward social good and innovation.

数智化转型网 · 了解更多产业资讯与选型数据 →

📰 你可能也喜欢

数智化转型网每日AI资讯 AI情报站

1400万企业的 AI 同事上线:WorkBuddy 进通讯录,群聊勾选即成任务、产物直接发回企微

10月14日,腾讯WorkBuddy宣布与企业微信完成深度融合,WorkBuddy客户端现可在企业授权范围内调用消息、文档、会议、微盘等十大能力,并以对话机器人…
📅 10-28 · 👁 2026年10月28日
数智化转型网每日AI资讯 AI情报站

“软硬模”三位一体!STEPX 首款大模型原生智能体手机 Neo 登场,售价 3999 元起

大模型原生 AI 终端品牌 STEPX(阶跃终端)在上海召开主题发布会,正式发布了旗下首款大模型原生智能体手机 STEPX Neo。该机型通过“硬件+操作系统+…
📅 10-28 · 👁 2026年10月28日
数智化转型网每日AI资讯 AI情报站

Meta 发布最强开源模型 Muse Spark Open,并牵手苹果力推 Mac 本地运行

当地时间周四,Meta 正式发布了其迄今为止能力最强的开放权重大模型——Muse Spark Open,并宣布与苹果展开合作,推动该模型在 Mac 电脑上实现本…
📅 10-28 · 👁 2026年10月28日
数智化转型网每日AI资讯 AI情报站

Anthropic IPO 估值遭砍:增速放缓,2 万亿美元预期回落至 1.5 万亿

路透社援引四名知情人士称,随着 AI 融资成本攀升引发市场不安,Anthropic 披露最新财务数据后,部分现有股东与拟参与 IPO 的投资人开始考虑下调对其的…
📅 10-28 · 👁 2026年10月28日
数智化转型网每日AI资讯 AI情报站

Figma 推出 Markdown 编辑器 Specs,扩大代码层公开测试

Figma 在印度举办的首届 Config 大会上推出基于 Markdown 的全新编辑器 Figma Specs,并向更多用户开放代码层(Code Layer…
📅 10-28 · 👁 2026年10月28日
数智化转型网每日AI资讯 AI情报站

斯坦福等联合提出全新文本生成范式 NCM,生成速度狂飙 31 倍

人工智能领域的文本生成技术迎来颠覆性创新。斯坦福大学与 Together AI 的研究人员近日联手推出了一种截然不同于传统自回归和扩散模型的全新文本生成范式——…
📅 10-28 · 👁 2026年10月28日