arXiv cs.AI· Jiaqi Xiong, Yunjia Qi, Qi Cao, Yu Zheng, Yutong Zhang, Ziteng Wang, Ruofan Liao, Weisheng Xu, Sichen Liu·· 5 小时前AI 评分32
DEAF:音频语言模型声学忠实度诊断评估基准
DEAF: A Benchmark for Diagnostic Evaluation of Acoustic Faithfulness in Audio Language Models
AI 导读
研究者推出 DEAF 基准,包含超过 2,700 条冲突刺激,覆盖情感韵律、背景声音和说话人身份三个声学维度,并设计逐级增强文本影响的多层级评估框架。对七个 Audio MLLM 的评测显示出一致的文本主导模式:模型对声学变化敏感,但预测主要由文本输入驱动,标准语音基准上的高分与真实声学理解之间存在差距。
来源:arXiv cs.AI · arxiv.org