arXiv cs.AI· Maria Zafar, Souhail Bakkali, Rejwanul Haque·· 10 小时前AI 评分22
知识蒸馏与量化压缩用于生物医学领域神经机器翻译研究
Investigating Model Compression for Neural Machine Translation in the Biomedical Domain
AI 导读
研究将知识蒸馏与量化联合应用于法译英生物医学翻译,蒸馏并量化的学生模型相比原始基线体积缩小69%、推理速度提升98.21%、CO2排放降低98.46%,且未牺牲翻译质量。该工作还开发并比较了多种微调策略,以让压缩后的学生模型适应专业术语密集、平行语料稀缺的低资源领域。
来源:arXiv cs.AI · arxiv.org