arXiv cs.CL· Beimnet Bekele Guta, Xiaoyu Yang, Guangzhi Sun, Philip C. Woodland·· 3 小时前AI 评分22
用路由稀疏自编码器解耦语音中的语言与副语言信息
Disentangling Linguistic and Paralinguistic Information with Routed Sparse Autoencoders
AI 导读
研究将 TopK 稀疏自编码器与路由专属监督及跨因子对抗结合,在冻结的 SPEAR 和 WavLM 编码器上实现语言与副语言信息的分离:语言信息在语言路由中更强,说话人身份、情感、韵律等副语言因子则保留在副语言路由中并在语言路由中大幅减少。
来源:arXiv cs.CL · arxiv.org