跳到正文
arXiv cs.CL· Hieu Hoang, Amittai Axelrod·· 1 天前AI 评分22

用部分语音学习何时提交:面向端到端同声传译的 prefix 监督

Learning When to Commit from Partial Speech for End-to-End Simultaneous Speech Translation

AI 导读

研究者用语音语言模型自身完整与部分波形的翻译结果构造 prefix 监督,无需转录文本或人工翻译,即可适配端到端同声传译。在 FLEURS 和 CoVoST2 三个翻译方向上,prefix 训练改善了质量—延迟前沿,置信度阈值提供了最稳定的操作区间;多轮 append-only 解码在低延迟下更强,其提交校准误差整体下降 63–68%,早期 prefix 下降 68–80%。

来源:arXiv cs.CL · arxiv.org