南洋理工团队推出首个支持物理仿真的三维生成模型！生成资产可直接部署于机器人训练 (opens in new tab)

首个支持物理仿真的三维生成模型来了！仅凭一张普通照片，AI 就能直接生成 3D 数字模型，并预测重量、软硬、关节活动等真实的物理属性。也就是说，AI 生成的不再只是与照片描述长得相似的资产，而是真的能够与物理世界进行交互，并有望对具身智能、物理 AI、AI for Science 的模型直接进行训练。近期，新加坡南洋理工大学刘子纬副教授团队开发了统一的三维生成框架 PhysX-Omni，打通了刚体、可变形体、关节体（铰链体）三类资产的物理级 3D 生成。研究人员发明了一种模板化游程编码，不仅直接让语言模型读懂三维结构，还显著提升了生成性能。“之前 3D 模型生成需要进行实际扫描和采集，但由于价格昂贵且无法规模化，并不适用于大模型的可扩展性。”刘子纬对 DeepTech 表示。而 PhysX-Omni 开启了近乎无穷无尽的生产模式，相当于做数据基建，不断为物理 AI 生产提供训练素材。（来源：arXiv）PhysX-Omni 的模型仅 7B（Qwen2.5-VL-7B-Instruct），总体推理成本低。据研究人员预估，其成本是传统仿真软件的 1/10 到 1/20。更值得关注的是...