中国数智化转型网 人工智能资讯 每日人工智能资讯|英伟达推出开源 AI 框架 Polar,Codex 性能提升近 600%

每日人工智能资讯|英伟达推出开源 AI 框架 Polar,Codex 性能提升近 600%

英伟达研究团队近日发布了一个全新的开源 AI 框架 ——Polar。该框架旨在帮助现有的智能体框架(如 Codex、Claude Code、Qwen Code)接入一种名为广义相对策略优化(GRPO)的训练方法,而不影响其原有的工具调用、上下文组织和补丁提交方式。这一创新将大大提升代码智能体的表现。

GRPO 是一种针对强化学习的优化技术,它通过奖励信号来调整模型策略,帮助模型在多步决策任务中学习到更优的行为。在这项研究中,GRPO 主要用于代码智能体的训练,旨在让模型在实际的工具调用和补丁提交流程中不断改进表现。数智化转型网www.szhzxw.cn

研究表明,智能体的强化学习正在逐步从单步任务转向更复杂的长流程任务,例如代码仓库的、浏览器操作以及操作系统的交互。这类任务往往依赖于现有的执行框架,涉及多轮调用、工具使用以及上下文管理等,因此直接将这些框架改写为传统的强化学习环境接口非常困难,可能导致关键训练信号的丢失。

英伟达的 Polar 框架并不试图重写智能体框架,而是通过在模型 API 的边界处放置智能体,保持原有运行逻辑不变。Polar 在执行框架与推理服务器之间了模型智能体,兼容多种请求风格,能够记录关键数据并将其转化为可用于训练的信息。数智化转型网www.szhzxw.cn

从系统架构来看,Polar 包括了任务提交、会话调度和状态持久化等功能,通过优化初始化、运行和后处理的流程,显著提升了训练效率。根据实验结果,使用 Polar 与 GRPO 训练的智能体在 SWE-Bench Verified 测试中的性能大幅提升,Codex 的 pass@1 分数从 3.8% 提升至 26.4%,增长幅度达 594.74%。

此外,该框架在提高效率方面也表现出色,训练时间减少了约 5.39 倍,GPU 的平均利用率也显著提升,为未来的智能体训练提供了更强大的支持。数智化转型网www.szhzxw.cn

若您对人工智能感兴趣,可添加数智化转型网小助手思思微信加入人工智能交流群。若您在寻找人工智能供应商,可联系数智化转型网小助手思思(17757154048,微信同号)

思思微信二维码

若您为人工智能服务商,可添加数智化转型网小助手Nora,加入人工智能行业交流群。

Nora微信二维码

若您为人工智能创业者,可添加数智化转型网社群主理人Carina,加入人工智能创业交流群。

Carina微信二维码

声明:本文来自数智化转型网,版权归作者所有。文章内容仅代表作者独立观点,不代表数智化转型网立场,转载目的在于传递更多信息。如有侵权,请联系我们。

底部图片
免责声明: 本网站(http://www.szhzxw.cn/)内容主要来自原创、合作媒体供稿和第三方投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。 本网站刊载的所有内容(包括但不仅限文字、图片、LOGO、音频、视频、软件、程序等) 版权归原作者所有。任何单位或个人认为本网站中的内容可能涉嫌侵犯其知识产权或存在不实内容时,请及时通知本站,予以删除。https://www.szhzxw.cn/121148.html
联系我们

联系我们

17717556551

邮箱: editor@cxounion.org

关注微信
微信扫一扫关注我们

微信扫一扫关注我们

关注微博
返回顶部