跳到正文
arXiv cs.AI· Qingchuan Ma, Yuexiao Ma, Xiang Meng, Yixuan Zou, Tianyu Xie, Wang Chen, Yuhui Zeng, Yuhang Wu, Xiawu Zheng, Rongrong Ji·· 8 小时前AI 评分32

RoTA-Bench:通过交互式投影对齐评估 3D 空间推理

RoTA-Bench: Evaluating 3D Spatial Reasoning through Interactive Projection Alignment

AI 导读

研究者推出 RoTA-Bench,通过交互式 3D 到 2D 投影对齐评估视觉语言模型的 3D 空间推理能力,包含 674 个任务及 100 个分层测试集。GPT-5.6-Sol 仅完成 17% 的任务,而 20 名本科生参与者以 100% 成功率集体完成测试集四次。在相同状态下,模型比人类更常出现轮廓重叠改善但姿态对齐变差的情况(19.4% vs. 10.9%)。

来源:arXiv cs.AI · arxiv.org