arXiv cs.AI· Dorian Benhamou Goldfajn, Mason Nakamura, Saaduddin Mahmud, Justin Svegliato, Kyle H. Wray, Shlomo Zilberstein·· 3 小时前AI 评分30
RoboTalk：从多模态演示中学习多机器人通信与协作
RoboTalk: Learning Multi-Robot Communication and Coordination from Multimodal Demonstrations
AI 导读
RoboTalk 是一个合成数据生成管线与数据集，包含 7,950 条多模态轨迹，覆盖 53 个移动操作厨房任务，用于训练小型 VLM 进行通信与协调。数据集包含 leader-follower 规划协议、工具调用（感知、操作、导航、通信）、推理轨迹和多样化自然语言通信。开源模型微调后在新任务上成功率达 77%，而未微调模型仅约 2%。
来源：arXiv cs.AI · arxiv.org