NVIDIA Research 近日在 Hugging Face 平台正式发布Lyra2.0框架，这一开源项目标志着 AI 生成式3D 世界构建技术迈向新高度。从单张输入图像出发，Lyra2.0能够生成持久一致、可自由探索的大型3D 场景，支持实时渲染、机器人仿真和沉浸式应用。
这一发布不仅提升了视频生成模型的时空一致性，更为物理 AI、游戏开发和虚拟环境构建提供了实用资产管道。
传统长时程视频生成模型在相机长距离移动时，常常出现”空间遗忘”（spatial forgetting）——模型无法记住先前生成区域的细节，导致场景不一致;同时还会产生”时间漂移”（temporal drifting）——物体位置、外观随时间逐渐偏移，严重影响后续3D 重建。
Lyra2.0针对这两大痛点提出创新解决方案:
空间记忆机制:系统为每一帧维护3D 几何信息，但仅用于信息路由——检索相关历史帧并建立密集对应关系，而外观合成仍依赖强大的生成先验，避免几何误差积累。
自增强训练策略:在训练中让模型接触自身生成的退化输出，教会它主动纠正漂移而非继续传播，从而实现更长的3D 一致视频轨迹。
通过这一两阶段设计，Lyra2.0能够从单张图像和用户定义的相机轨迹出发，迭代生成长序列视频片段，并将其可靠地提升为高质量3D 高斯溅射（3D Gaussian Splatting）或网格模型，支持实时渲染和进一步仿真。
使用流程:
输入一张图像（可选搭配文本提示）;
通过交互式3D 浏览器定义相机移动轨迹;
模型自回归生成相机控制的长视频片段;
将视频序列提升为显式3D 表示（点云、Gaussian 或网格），并反馈用于持续导航;
最终导出可直接用于 Unity、Unreal、Isaac Sim 等环境的资产。
实验显示，Lyra2.0在长视频生成和3D 场景重建指标上超越了 GEN3C、CaM、Yume-1.5等多款现有方法，尤其在场景规模和一致性上表现出色。生成的场景可达数十米范围，用户能自由”走回去”、环顾四周，甚至投放机器人进行实时交互。
Lyra2.0的模型权重已在 Hugging Face（nvidia/Lyra-2.0）开放，代码仓库同步上线 GitHub(nv-tlabs/lyra)，采用 Apache2.0许可，支持商业使用。底层视频骨干基于 Wan-14B 等强大扩散模型，重建阶段结合 Depth Anything V3等工具，确保输出高质量且实用。
这一框架特别适用于:
embodied AI 与机器人训练 :生成一致的仿真环境，直接导入 Isaac Sim;
游戏与沉浸式内容:快速构建可探索的虚拟世界;
3D 资产生成管道:从概念图到可编辑网格，一站式完成。
相比早期版本，Lyra2.0在场景持久性和可扩展性上实现显著飞跃，为”世界模型”从演示走向实用资产铺平道路。
NVIDIA 此次开源不仅展示了生成式 AI 在时空建模上的技术突破，更体现了行业向开放生态的持续投入。随着 Lyra2.0等工具的普及，开发者将能更高效地构建大规模、可交互的3D 世界，进而推动机器人、自动驾驶和元宇宙应用的加速落地。
若您对人工智能感兴趣，可添加数智化转型网小助手思思微信加入人工智能交流群。若您在寻找人工智能供应商，可联系数智化转型网小助手思思（17757154048，微信同号）
若您为人工智能服务商，可添加数智化转型网小助手Nora，加入人工智能行业交流群。
若您为人工智能创业者，可添加数智化转型网社群主理人Carina，加入人工智能创业交流群。
声明：本文来自数智化转型网，版权归作者所有。文章内容仅代表作者独立观点，不代表数智化转型网立场，转载目的在于传递更多信息。如有侵权，请联系我们。
本文由数智化转型网（www.szhzxw.cn）转载，编辑/翻译：数智化转型网（Professionalism Achieves Leadership 专业造就领导者）默然
