中国数智化转型网 人工智能资讯 每日人工智能资讯|OpenAI 开启 AI 安全飞轮:GPT-Red 如何重新定义模型鲁棒性

每日人工智能资讯|OpenAI 开启 AI 安全飞轮:GPT-Red 如何重新定义模型鲁棒性

在追求更强大 AI 能力的同时,模型如何确保自身安全已成为行业核心命题。近日,OpenAI 发布了全新的自动化红队测试模型 GPT-Red,通过规模化的自博弈训练,成功将模型在直接提示注入攻击中的失败率压低至0.05%,为 AI 的自我迭代与安全性提升开辟了一条新路径。数智化转型网www.szhzxw.cn

随着 AI 系统通过浏览器、本地文件及各类 API 深度接入现实世界,安全边界变得愈发脆弱。传统的红队测试虽然有效,但高度依赖人工,难以跟上模型能力的指数级增长,也无法产出足够的对抗数据来优化防御。OpenAI 此次推出的 GPT-Red,正是为了打破这一瓶颈。它不仅能在部署前精准定位模型漏洞,更重要的是,它能实时生成大规模的对抗样本,推动模型在训练阶段就完成防御升级。数智化转型网www.szhzxw.cn

GPT-Red 的训练采用了自博弈强化学习策略。在训练过程中,它与一组多样化的防御方模型进行高频对抗,通过尝试各种提示词注入、逻辑诱导等攻击手段来寻找系统破绽。这种“互搏”机制迫使防御方不断修正策略,而 GPT-Red 也在这种对抗中进化得愈发犀利。数据显示,GPT-Red 的攻击能力已远超人类红队成员,在特定测试场景中,人类的攻击成功率仅为13%,而 GPT-Red 则高达84%。数智化转型网www.szhzxw.cn

为了验证这一工具的实战价值,OpenAI 进行了一系列严苛的压力测试。在针对某款自主控制自动售货机的 AI 智能体实验中,GPT-Red 成功模拟并实现了恶意修改商品价格、窃取订单等操作。这一案例清晰展示了在复杂智能体系统中,自动化攻击模型具备极强的渗透力。数智化转型网www.szhzxw.cn

目前,GPT-Red 已被整合进生产模型的训练流程。得益于此,最新的 GPT-5.6Sol 版本对提示注入展现出了极强的鲁棒性。实验证明,这一安全提升并未牺牲模型的通用能力,既没有出现盲目拒绝合法请求的现象,也未降低任务执行效率。数智化转型网www.szhzxw.cn

OpenAI 认为,GPT-Red 的成功证明了 AI 安全“飞轮效应”的可行性:利用先进的 AI 来构建更安全的未来系统。随着计算规模与数据多样性的持续提升,这一自动化安全测试框架有望成为未来模型开发的标配,让模型在不断演进的过程中,始终保持稳固的安全防线。数智化转型网www.szhzxw.cn

若您对人工智能感兴趣或为人工智能创始人,可添加数智化转型网小助手思思微信加入人工智能交流群。若您在寻找人工智能供应商,可联系数智化转型网小助手思思(17757154048,微信同号)

思思企微
思思企微

若您为人工智能服务商,可添加数智化转型网小助手Jasper,加入人工智能行业交流群。

鹿鸣企微
Jasper企微

声明:本文来自数智化转型网,版权归作者所有。文章内容仅代表作者独立观点,不代表数智化转型网立场,转载目的在于传递更多信息。如有侵权,请联系我们。

底部图片
免责声明: 本网站(http://www.szhzxw.cn/)内容主要来自原创、合作媒体供稿和第三方投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。 本网站刊载的所有内容(包括但不仅限文字、图片、LOGO、音频、视频、软件、程序等) 版权归原作者所有。任何单位或个人认为本网站中的内容可能涉嫌侵犯其知识产权或存在不实内容时,请及时通知本站,予以删除。https://www.szhzxw.cn/132847.html
0
标签:
联系我们

联系我们

17717556551

邮箱: editor@cxounion.org

关注微信
微信扫一扫关注我们

微信扫一扫关注我们

关注微博
返回顶部