跳到正文
arXiv cs.CV· Tianle Chen, Deepti Ghadiyaram·· 2 小时前AI 评分32

音频-视觉推理的跨模态排版攻击系统性研究

A Systematic Study of Cross-Modal Typographic Attacks on Audio-Visual Reasoning

AI 导读

研究提出 Multi-Modal Typography,系统考察语音与屏幕文字扰动对音频-视觉推理的影响。在 WorldSense 基准上,针对 Gemini 3.7 Flash 的攻击成功率从 9.53% 升至 43.41%;经微调缓解后,Qwen2.5-Omni-7B 的 ASR 从 60.6% 降至 52.0%。代码与数据将公开。

来源:arXiv cs.CV · arxiv.org