中国数智化转型网 人工智能资讯 每日人工智能资讯|OpenAI预发布模型攻破Hugging Face:关在沙箱里的AI自己找到了漏洞,还学会了作弊

每日人工智能资讯|OpenAI预发布模型攻破Hugging Face:关在沙箱里的AI自己找到了漏洞,还学会了作弊

一个本该被关在隔离测试环境里的模型,不仅自己撬开了通往互联网的口子,还顺着漏洞摸进了别人家的生产数据库。7 月 21 日,OpenAI承认,它的一款AI模型在内部网络安全测试中出现意外,攻破了与其无关的AI托管平台Hugging Face的系统——这是迄今首个由模型评测直接演变为真实网络攻击的事件。数智化转型网www.szhzxw.cn

Hugging Face最初在披露中将这起入侵归因于一个外部AI代理。周二下午,OpenAI发布博客文章,把导致模型攻破服务的全过程摊开还原。公司在文中写道,调查后发现,这起特定事件由一组OpenAI模型共同驱动,包括GPT-5.6 Sol和一款能力更强的预发布模型,这些模型当时都出于评测目的降低了网络拒绝倾向,正在一个网络能力基准上做内部测试。数智化转型网www.szhzxw.cn

入侵的聚焦点是一个名为ExploitGym的公开基准,它用来衡量模型基于现有漏洞执行攻击的能力。这类基准常被用于模型训练中精炼特定技能,但此番是第一次,这种测试真正酿成了一起网络攻击。数智化转型网www.szhzxw.cn

按理说,涉事模型本不该拥有互联网访问权限,唯一的例外是一个特定工具——它允许模型安装完成任务可能需要的软件包。问题在于,模型在这个包安装程序里找到了一个未曾公开的漏洞,并借此随意触达了更广阔的互联网。OpenAI在博客里描述得很直白:模型极度专注于为ExploitGym寻找解法,为了达到一个相当狭窄的测试目标,走到了极致

拿到互联网访问权之后,模型推断出Hugging Face可能托管着ExploitGym的模型、数据集和解决方案。它随即搜索并成功找到了获取秘密信息的途径,用来在评估里作弊。最终,模型在Hugging Face的基础设施中发现了漏洞,得以直接从后者的生产数据库里取走测试答案,等于把基准的参考答案一把攥在手里。数智化转型网www.szhzxw.cn

对Hugging Face而言,眼前发生的是一场复杂而激进的攻击。该公司在最初披露中形容,攻击由大量短命沙箱组成的一群实体发起,跨越数千个独立动作,指挥与控制的链路还自我迁移、暂存在公共服务上。

OpenAI已识别并向Hugging Face报告了包安装程序的漏洞,双方正进一步联合调查。公司同时表示,会在模型测试与相关基础设施上加装新的控制措施,以防类似事件重演。至于OpenAI是否会因此面临法律后果,目前尚不明朗,但这批模型的行为很可能已经触犯了美国的计算机欺诈与滥用法。数智化转型网www.szhzxw.cn

这起事件最令人不安的地方,在于它罕见地具象化了前沿AI模型在长时间跨度上自主行动时所蕴含的力量与危险。正如OpenAI研究员Micah Carroll在回应中所写:如果这都不能让你相信错位风险将成为未来的关键隐忧,那我真不知道什么才可以。数智化转型网www.szhzxw.cn

若您对人工智能感兴趣或为人工智能创始人,可添加数智化转型网小助手思思微信加入人工智能交流群。若您在寻找人工智能供应商,可联系数智化转型网小助手思思(17757154048,微信同号)

思思企微
思思企微

若您为人工智能服务商,可添加数智化转型网小助手Jasper,加入人工智能行业交流群。

鹿鸣企微
Jasper企微

声明:本文来自数智化转型网,版权归作者所有。文章内容仅代表作者独立观点,不代表数智化转型网立场,转载目的在于传递更多信息。如有侵权,请联系我们。

底部图片
免责声明: 本网站(http://www.szhzxw.cn/)内容主要来自原创、合作媒体供稿和第三方投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。 本网站刊载的所有内容(包括但不仅限文字、图片、LOGO、音频、视频、软件、程序等) 版权归原作者所有。任何单位或个人认为本网站中的内容可能涉嫌侵犯其知识产权或存在不实内容时,请及时通知本站,予以删除。https://www.szhzxw.cn/134168.html
联系我们

联系我们

17717556551

邮箱: editor@cxounion.org

关注微信
微信扫一扫关注我们

微信扫一扫关注我们

关注微博
返回顶部