arXiv cs.CL· Yixian Tan, Aulia Adila, Jonathan Heng, Kunat Pipatanakul, Donghang Wu, Anocha Sutaveephamochanon·· 5 小时前AI 评分27
SEA-HELM Audio：评估多语言 ASR-LLM 流水线在 SEA-HELM 各子集上的表现
SEA-HELM Audio: Evaluating Multilingual ASR-LLM Pipeline Performance Across SEA-HELM Subsets
AI 导读
研究团队推出 SEA-HELM Audio，将文本版 SEA-HELM 基准扩展至东南亚多语言语音场景，用合成语音对比中文、英文、马来语、印尼语和泰米尔语在 ASR-LLM 级联流水线中的表现。结果显示语音输入相比文本输入明显退化：多项选择推理准确率下降 9.00 至 18.50 个百分点，指令遵循下降 20.00 至 42.86 个百分点，泰米尔语降幅最大，超过 40 个百分点。
来源：arXiv cs.CL · arxiv.org