PhysX-Anything:可模拟3D资产的单图像生成:明确保留关节和物理参数 – 开源

南洋理工大学与上海人工智能实验室联合发布了开源框架PhysX-Anything,能够仅凭一张RGB图像输出包含 […]

南洋理工大学与上海人工智能实验室联合发布了开源框架PhysX-Anything,能够仅凭一张RGB图像输出包含几何、关节和物理参数的完整三维资产。它可以直接导入MuJoCo和Isaac Sim,用于机器人政策培训。

技术亮点  

1. 粗细流水线:首先预测整体物理属性(质量、质心、摩擦系数),然后在组件层面细化几何形状和接头极限,避免因“视觉优先”引起的物理变形。

2. 新型压缩三维表示:将面 + 关节轴 + 物理属性编码为 8K 维潜在矢量。推理时,解码一次,速度比SOTA方法提升2.3倍。

3. 显式物理监督:向数据集添加12万组真实物理测量。训练时引入质心、惯性和碰撞盒损失,以确保模拟的一致性。

测试结果  

在几何倒角和物理误差指标上,PhysX-Anything分别将误差降低了18%和27%。绝对尺度误差小于2厘米,关节运动范围误差小于5°,显著优于近期方法如ObjPhy和PhySG。在现实场景(宜家家具、厨房工具)中,导入生成素材到Isaac Sim后,机器人的抓取成功率提高了12%,训练步骤数量减少了30%。

开源与影响  

该项目现已在GitHub上发布,权重、数据和评估基准也公开开放。团队计划于2026年第一季度发布第二版,支持“视频输入”以预测可移动组件的时间轨迹,支持动态场景策略学习。

💬 评论
🔗 本文链接

以专业为基,引领科技向善向新

Rooted in professionalism, we lead technology toward social good and innovation.

数智化转型网 · 了解更多产业资讯与选型数据 →

📰 你可能也喜欢

数智化转型网每日AI资讯 AI情报站

Gemini3.8Live升级语音智能:对话、推理与任务执行进一步融合

谷歌近日发布Gemini3.8Live和Gemini3.8Live Extended Thinking,新增近实时推理、语音与思考同步处理,以及后台工具和API…
📅 10-21 · 👁 2026年10月21日
数智化转型网每日AI资讯 AI情报站

OpenAI 宣布 GPT-5.5 将于 10 月 14 日下线: 与 Codex 同步移除

OpenAI 9 月 16 日宣布,GPT-5.5 将于 10 月 14 日从 ChatGPT、ChatGPT Work 和 Codex 中下线,覆盖所有订阅方…
📅 10-21 · 👁 2026年10月21日
数智化转型网每日AI资讯 AI情报站

估值冲击1.2万亿美元!OpenAI密谈新一轮融资

人工智能领域的领头羊 OpenAI 近期正与投资者就新一轮私募融资展开初步洽谈,其目标估值高达 1.2 万亿美元。此次潜在融资是在 GPT-5.6 以及 Ast…
📅 10-21 · 👁 2026年10月21日
数智化转型网每日AI资讯 AI情报站

​豆包大模型 2.1 Pro 0915 版本重磅发布:Agent 交付更稳、多模态 Coding 全面进化

9月16日,火山引擎官方正式宣布,豆包大模型2.1Pro(Doubao-Seed-2.1-pro)迎来了全新的0915版本升级,目前该模型的 API 已经全量上…
📅 10-21 · 👁 2026年10月21日
数智化转型网每日AI资讯 AI情报站

vivo 正式发布智能体大模型矩阵,并重磅预研 30B MoE 端侧大模型

vivo 今日正式召开发布会,推出全新的智能体大模型矩阵,涵盖语音、端侧、云侧等四款核心大模型,全方位赋能终端设备的智能化体验。与此同时,vivo 官方宣布正在…
📅 10-21 · 👁 2026年10月21日
数智化转型网每日AI资讯 AI情报站

Claude 发布重大升级:43 项全能工作流与 27 个巨头应用深度打通

Anthropic 于2026年9月15日正式宣布对其“中小企业版 Claude”进行重大功能升级。本次更新一口气推出了43项高效工作流,并新增了多达27个与主…
📅 10-21 · 👁 2026年10月21日