arXiv cs.CL· Shubh Garg, Chen Shani·· 2 小时前AI 评分27
研究揭示 VLM 空间关系表征弱于词汇先验:EICS 与 CASP-VL 基准
When VLMs Destroy What They Know: Spatial Representations Fall Below Lexical Priors
AI 导读
研究提出 EICS 指标与基于 Visual Genome 场景图构建的 CASP-VL 基准,测试 VLM 内部表征能否稳定编码概念。结果显示,多个 VLM 架构对空间关系的表征忠实度显著低于词汇信息,即便这些模型在组合式基准上得分远高于随机水平。关系信息在谓词自身 token 处可识别,但经 EOS token 或均值池化聚合为全局表征后即丢失。
来源:arXiv cs.CL · arxiv.org