跳到正文
arXiv cs.CL· Hemant Yadav, Sunayana Sitaram, Roger Zimmermann, Rajiv Ratn Shah·· 9 小时前AI 评分24

DirectSpeech2LLM:缓解 Speech-LLM 提示词过拟合的端到端框架

DirectSpeech2LLM: A Simple End-to-End Framework to Mitigate Prompt Overfitting in Speech-LLMs

AI 导读

DirectSpeech2LLM 是一个端到端框架,用于缓解 Speech-LLM 的提示词过拟合问题——仅在 ASR 指令上训练的模型难以泛化到语音翻译等新指令。

来源:arXiv cs.CL · arxiv.org