为机器人解锁3D视觉:月烈玲吉推出了GeoVLA框架,彻底革新了传统的VLA模型!

如今,随着人工智能和机器人技术的快速发展,视觉-语言-动作(VLA)模型被广泛认为是构建通用机器人的关键。然而,许多现有的VLA模型(如OpenVLA、RT-2等)在处理复杂非结构化环境时暴露出一个严

如今,随着人工智能和机器人技术的快速发展,视觉-语言-动作(VLA)模型被广泛认为是构建通用机器人的关键。然而,许多现有的VLA模型(如OpenVLA、RT-2等)在处理复杂非结构化环境时暴露出一个严重缺陷:空间盲。它们依赖二维RGB图像作为视觉输入,这限制了模型在三维空间中的表现,也使得准确判断物体的深度和位置变得困难。

为解决这一问题,元里灵机研究团队推出了新的VLA框架——GeoVLA。该框架保留了现有视觉语言模型(VLM)的强大预训练能力,同时采用创新的双流架构。具体来说,GeoVLA引入了专用点云嵌入网络(PEN)和空间感知动作专家(3DAE),赋予机器人真正的三维几何感知能力。该设计不仅在仿真环境中实现领先性能,还在实际测试场景中展现出卓越的鲁棒性。

GeoVLA的核心逻辑在于解耦任务:让VLM负责“理解它是什么”,而点云网络负责“知道它在哪里”。这一全新的端到端框架包含三个关键组成部分的协作工作:语义理解流、几何感知流和动作生成流。这种方法使模型能够更准确地执行任务。

在一系列实验中,GeoVLA展示了显著优势。在LIBERO基准测试中,GeoVLA实现了97.7%的成功率,超过了之前的SOTA模型。此外,在更复杂的物理模拟测试如ManiSkill2中,GeoVLA表现异常出色,尤其在处理复杂物体和视角变化时保持了较高的成功率。

更令人印象深刻的是,GeoVLA在分布外场景中表现出鲁棒性,证明了其应对各种不确定性和变化条件的强大适应能力。这一突破将为未来机器人应用开辟新可能,推动智能机器人技术迈向更高水平。

💬 评论
🔗 本文链接

以专业为基,引领科技向善向新

Rooted in professionalism, we lead technology toward social good and innovation.

数智化转型网 · 了解更多产业资讯与选型数据 →

📰 你可能也喜欢

数智化转型网每日AI资讯 AI情报站

OpenAI研究负责人回应解雇三名员工争议并全面澄清原因

近期,OpenAI 内部陷入了一场关于前员工离职争议的舆论漩涡。针对外界对于三名研究人员离职原因的种种猜测与公开信质疑,OpenAI 研究负责人正式发表了一份详…
📅 10-29 · 👁 2026年10月29日
数智化转型网每日AI资讯 AI情报站

一网打尽全家AI需求?微软或允许Microsoft365家庭成员共用Copilot额度

微软据称正酝酿对其生成式AI服务Copilot的权益分发机制进行重大调整,拟取消此前仅限订阅持有人独自使用的限制,允许Microsoft365Family和Pr…
📅 10-29 · 👁 2026年10月29日
数智化转型网每日AI资讯 AI情报站

谷歌 Gemini 4 Argon 突袭开放,AI 或将直接代替程序员提交代码

海外科技圈近期爆出重磅消息,谷歌下一代重磅人工智能模型 Gemini 4 Argon 已密集现身多个平台,并开始面向部分 Pro 用户开放。该模型已全面接入 G…
📅 10-29 · 👁 2026年10月29日
数智化转型网每日AI资讯 AI情报站

谷歌云重磅发布通用Gemini智能体,可自主拆解并执行复杂多步骤任务

谷歌云在近日举办的 “Gemini at Work2026” 大会上正式宣布,面向全球企业客户推出全新的 Gemini 智能体(Gemini Agent)。该产…
📅 10-29 · 👁 2026年10月29日
数智化转型网每日AI资讯 AI情报站

陶哲轩警示 OpenAI 批量生成证明,数学界面临“证明消化不良”

著名数学家陶哲轩等学者近期对 OpenAI 批量发布 AI 生成的数学证明提出严厉批评。事起 OpenAI 从 GitHub 发布了包含数百项开放难题解答的 7…
📅 10-29 · 👁 2026年10月29日
数智化转型网每日AI资讯 AI情报站

苹果官宣10月13日举行“Welcome home”发布会,全面发力智能家居AI中枢

苹果公司正式宣布,将于10月13日在纽约举办主题为“Welcome home”(欢迎回家)的智能家居新品发布会。这是新任首席执行官 John Ternus 上任…
📅 10-29 · 👁 2026年10月29日