跳到正文
arXiv cs.AI· Guanxiong Chen, Qianjun Xia, Jiawei Peng, Heng Zhang, Pengyu Jing, Bole Ma, Justin Qian, Yixian Cheng, Ziyi Jiao, Bingyang Zhou, Yiduo Qu, Luoxin Ye, Kaifeng Zhang, Kunyi Wang, Weijia Zeng, Yunuo Chen, Pengzhi Yang, Ziqiu Zeng, Siyuan Luo, Huamin Wang, Chao Liu, Alan Yuille, Fan Shi, Changxi Zheng, Yunzhu Li, Chenfanfu Jiang, Peter Yichen Chen·· 9 小时前AI 评分30

Agentic Real2Sim:用视觉语言智能体实现基于物理的世界建模

Agentic Real2Sim: Physics-based World Modeling with Vision-Language Agents

AI 导读

研究者提出 Agentic Real2Sim 框架,用视觉语言智能体将真实世界物体-机器人交互录像转化为可仿真的情景数字孪生,并接入下游策略微调与评估。该框架覆盖刚体操作、可变形物体交互和人形运动场景,其智能体决策可由开放权重 VLM 驱动,成本仅为前沿模型的一小部分,转换成功率却相当。项目代码已公开。

来源:arXiv cs.AI · arxiv.org