arXiv cs.CL· Shunsuke Mitsumori, Tomoya Mizumoto, Yusuke Fujita·· 4 小时前AI 评分22
用合成伪方言增强实现方言鲁棒语音语言模型
Dialect-Robust Speech Language Models with Synthetic Pseudo-Dialect Augmentation
AI 导读
研究提出通过标准语言 TTS 模型转换 LLM 生成的方言文本，合成伪方言语音，无需任何真实方言语音数据。在日语、德语、中文方言的方言到英语语音翻译评测中，伪方言增强将日语得分从 25.38 提升至 26.24，德语从 31.57 提升至 32.47；训练中引入的中间标准文本预测进一步将日语提升至 28.26，中文从 11.67 提升至 16.37。该方法无需各方言专属语音资源，可扩展至多种语言。
来源：arXiv cs.CL · arxiv.org