近一年,3D高斯在学术界和工业界迅速走红。
但在机器人领域,一个现实问题始终存在:
3D高斯很好看,却很难直接用。它擅长“还原世界”,却不理解世界——
没有物体语义、没有物理边界,也无法支撑机器人听懂指令、规划路径、避免碰撞。
最近,群核科技联合浙江大学正式开源 SAGE-3D数据集,这是行业“首个基于 3D高斯的 VLN(视觉语言导航) 具身学习数据集”,目前该数据集在全球最大AI开源社区 HuggingFace上整体下载量已超万次。
SAGE-3D数据集包含1000个场景的超过55.4万个对象实例的语义信息和碰撞体数据,以及面向 VLN 任务的200万条“轨迹-指令”对数据。数智化转型网www.szhzxw.cn
一、给3D高斯加上“语义大脑”和“物理身体”
SAGE-3D数据集的突破在于,它为3D高斯环境同时注入“语义理解”与“物理感知”能力,建立了一个既保持高保真渲染特性,又具备语义标注和物理碰撞检测的可执行导航环境。
1. 语义层:让机器人“听得懂指令”
机器人要完成视觉-语言导航(VLN),前提是能理解环境中的“物体”和“关系”。
SAGE-3D 通过物体级语义赋能,将原本连续的高斯点云,升级为“可被理解的空间”,为 3D高斯场景引入精细物体标注(类别、实例 ID、边界框)。数智化转型网www.szhzxw.cn
这项工作就是之前群核开源的InteriorGS数据集,当时还冲上HuggingFace趋势榜第一。
2. 物理层:让机器人“走得安全”
视觉真实并不等于物理可用。如果没有碰撞约束,再真实的环境,机器人也可能“穿墙而过”。
在保留3D高斯高保真渲染的基础上,SAGE-3D可为每个物体添加碰撞体数据,这让机器人的每一步移动都受到真实物理约束,路径规划不再只是“视觉最短路”,而是可真实执行的安全路径。
二、形成“数据-训练-评估”闭环
除了高质量数据,SAGE-3D还推出了首个完全基于3DGS的VLN基准测试平台SAGE-Bench,形成“数据-训练-评估”闭环。
SAGE-Bench 包含:数智化转型网www.szhzxw.cn
- 200万条分层指令数据:高层指令贴近真实场景,比如“我渴了,去冰箱拿饮料”(场景驱动)、“走到桌子旁的椅子”(相对关系);低层指令聚焦基础动作,比如“向前走两步”“左转90度”,覆盖5类语义场景和多种动作需求;
- 三轴评估框架:从“任务类型(VLN/无目标导航)、指令层级(高层/低层)、场景复杂度(物体密度/路径长度)”三个维度,全面评估模型性能;
- 导航自然连续性指标:解决传统指标的不足,比如“综合碰撞惩罚(ICP)”区分“偶尔接触”和“持续刮擦”,“路径平滑度(PS)”评估运动是否自然,更贴合真实机器人导航需求。
在SAGE-Bench测试中,我们发现,在SAGE-3D数据上训练的模型,在传统VLN-CE基准的未见过场景中,成功率提升了31%,这表明高保真的3D高斯数据具有强泛化性。
数智化转型网正在帮助企业寻找优质的数智化服务商,如果您想联系该厂商的人,请联系我们!思思:17757154048(微信同号)数智化转型网www.szhzxw.cn

如果贵司从事服务商行业,希望获得免费 曝光权益或跟我们进行合作,请联系我们!Nora:N19221855776(微信同号)数化转型网www.szhzxw.cn

数智化转型网数智化服务商库拥有来自数智化咨询、ERP、ERP实施、WMS、MES、CRM、SCRM、HR数智化、OA、协同办公数智化、电子签章、发票解决方案、税务解决方案、SRM供应商管理数智化、常见硬件等IT基础设施、低代码开发类、流程管理、预算管理、差旅管理、费控报销数智化、客服数智化、项目与任务管理、研发数智化PLM、财务共享数智化、TMS、电子招投标、B2B供应链管理、视频会议产品、企业直播、在线教育、在线文档、表格信息收集工具、智慧桌面运维、企业文档管理、云计算、云服务、营销数智化、MA、舆情监测分析、E-learning学习平台产品、电商数智化、电商ERP、国产操作系统、国产数据库、ESB、合同管理系统、资金管理、RPA、AI人工智能、信息安全、数据备份与恢复、网络安全态势感知、网管/ITIL/运维管理系统、虚拟云桌面、应用统一身份管理/身份认证/单点登录、上网行为管理、VPN、智慧园区、防火墙、主机文档加密与权限控制、邮件安全产品、运维审计/4A/堡垒机、桌面管理/主机审计、网闸、防病毒、虚拟化安全防护、SIEM/日志管理/日志审计/SOC/安管平台、网络准入控制、主机加固/服务器加固/EDR、打印安全、Web应用防火墙、加密机/密码机、基于云的安全服务、SIEM/日志管理/日志审计等数智化所需软硬件等百余个品类的大小型服务商资料及用户实际使用情况及相应产品同行业实际口碑。数智化转型网szhzxw.cn
数智化转型网数智化服务商库同时拥有来自制造业、消费品行业、电力行业、文化出版行业、医疗行业、外贸行业、交通行业、零售连锁行业、电子商务行业、电商行业、建筑地产行业、汽车销售行业、汽车零部件行业、汽车整车行业、服装制造行业、服装销售行业、教育行业、金融行业、银行业、保险业、证券业、餐饮行业、酒店行业、物流行业、物业行业等具有不同行业特性的数智化服务商方案及用户实际使用情况及相关产品在行业内的具体口碑;也拥有来自外企、央国企、民企等不同类型企业的适用服务商方案及相关产品在同类型企业用户的实际使用情况及具体口碑情况。
声明:本文来自网络,版权归作者所有。文章内容仅代表作者独立观点,不代表数智化转型网立场,转载目的在于传递更多信息。如有侵权,请联系我们。数智化转型网www.szhzxw.cn

本文由数智化转型网(www.szhzxw.cn)转载而成,来源于网络;编辑/翻译:数智化转型网(Professionalism Achieves Leadership 专业造就领导者)宁檬树
