英伟达联合清华推出 Gamma-World,打破多智能体虚拟仿真天花板

视频世界模型正迎来从单人视角向多人协作的底层变革。传统的视频世界模型大多建立在单智能体假设之上,难以应付多个玩家在同一虚拟世界中同时操作、互相观察的复杂场景。

视频世界模型正迎来从单人视角向多人协作的底层变革。传统的视频世界模型大多建立在单智能体假设之上,难以应付多个玩家在同一虚拟世界中同时操作、互相观察的复杂场景。为了打破这一架构瓶颈,英伟达联合清华大学、多伦多大学及 Vector Institute 正式发布了名为 Gamma-World(γ-World)的全新多智能体世界模型方案。

多智能体世界建模的核心难点在于同时维护时间、跨视角以及交互的三重一致性。以往的研究如 Solaris 虽然在双人协同上取得了进展,但暴露出身份编码破坏置换对称性、全连接注意力机制导致计算量随人数平方级暴涨这两大核心缺陷,无法真正扩展到更多主体。

针对这些结构性缺失,Gamma-World 从底层组件入手进行了重新设计。首先,团队创新性地提出了“正单纯形旋转智能体编码(Simplex Rotary Agent Encoding)”。通过将所有玩家放置在几何空间的正单纯形顶点上,实现了所有玩家天然等距且地位平等。这种设计不含任何可学习参数,随机分配坐标,使得模型在无需更改架构的情况下,就能实现“双人数据训练、四人场景直接跑通”的跨越式泛化。

其次,为了解决算力吞吐瓶颈,Gamma-World 引入了“稀疏枢纽注意力机制(Sparse Hub Attention)”。该设计彻底摒弃了传统的两两直接通信模式,改用一组可学习的枢纽 Token 作为共享世界状态的压缩中转站,将计算成本成功降至线性复杂度。在独立的缓存技术加持下,系统成功实现了每秒24帧(24FPS)的实时动作响应推演。

在训练层面,项目采用了三阶段师生蒸馏法,利用双向教师模型引导因果学生模型,成功将多步采样压缩为4步采样,不仅保障了动作的可控性,还有效缓解了自回归推演中的误差累积。

实验数据显示,在多人 Minecraft 虚拟环境的记忆、建造等五类核心场景测试中,Gamma-World 相比现有最强模型取得了全面领先,评估视频质量的 FVD 指标平均降幅超过40%。此外,该框架已成功迁移至真实双臂机器人的协同任务中,充分验证了其跨场景的通用性。这不仅标志着多智能体仿真能力的提升,未来更有望为多臂医疗协同、工厂多机器人调度以及自动驾驶等物理 AI 领域提供全新的大规模模拟生成基础设施。

💬 评论
🔗 本文链接

以专业为基,引领科技向善向新

Rooted in professionalism, we lead technology toward social good and innovation.

数智化转型网 · 了解更多产业资讯与选型数据 →

📰 你可能也喜欢

数智化转型网每日AI资讯 AI情报站

AI圈国庆大动作:DeepSeek拟募 800 亿,OpenAI立下 28 天连更军令状

这个国庆假期,国内外的AI公司都没闲着,几笔资金与产品的大动作接连砸进视野。最重的一记来自DeepSeek——路透社10月6日援引知情人士称,这家公司正在推进的…
📅 10-30 · 👁 2026年10月30日
数智化转型网每日AI资讯 AI情报站

Manus 母公司完成新一轮超5亿美元融资,腾讯红杉继续加码

AI 明星公司 Manus 的母公司近日完成新一轮超5亿美元融资,估值大幅攀升。本轮由博裕投资和 IDG 资本联合领投,老股东腾讯、红杉中国等继续跟投,显示出资…
📅 10-30 · 👁 2026年10月30日
数智化转型网每日AI资讯 AI情报站

大模型商业化步伐提速 可灵AI冲刺港股或开启生成式AI上市新阶段

近日,有消息称快手科技旗下人工智能视频服务提供商可灵AI正筹备赴香港开展首次公开募股(IPO),目前已选定中金公司、高盛集团及瑞银集团作为承销银行,计划募资规模…
📅 10-30 · 👁 2026年10月30日
数智化转型网每日AI资讯 AI情报站

豆包App上线生活缴费功能,加速布局高频生活办事场景

10月9日,据《读佳》报道,字节跳动旗下AI助手豆包正式新增“生活缴费”功能。用户只需在豆包App内通过语音或打字下达“交水费”等相关指令,系统即可实时弹出现场…
📅 10-29 · 👁 2026年10月29日
数智化转型网每日AI资讯 AI情报站

腾讯总部座谈会披露AI进展:马化腾与首席AI科学家姚顺雨相邻而坐

10月8日,广东省委书记黄坤明赴深圳腾讯总部调研,重点考察企业在人工智能方向的研发创新与产业布局。在随后的座谈会上,腾讯创始人、董事会主席兼CEO马化腾与腾讯首…
📅 10-29 · 👁 2026年10月29日
数智化转型网每日AI资讯 AI情报站

阶跃首款大模型原生智能体手机定档:一句话调度跑腿,拍张海报就帮你请假

阶跃终端把"手机自己干活"这件事推到了发布台前。它宣布旗下首款大模型原生智能体手机STEPX Neo将于10月13日晚7点正式亮相,这台机器…
📅 10-29 · 👁 2026年10月29日