跳到正文
arXiv cs.AI· Xuan Wen, Yonghao Song, Yuhong Zhang, Guoliang Li, Tzyy-Ping Jung, Xiaorong Gao·· 6 小时前AI 评分27

LaS:用语言监督训练神经解码器,语音解码准确率最高提升 17.15pp

Teaching neural decoders with language

AI 导读

研究提出 Language as Supervision(LaS),通过可学习投影将神经特征与自然语言类别描述对齐,并用候选文本原型完成分类。在头皮与颅内记录的视觉、运动、语音解码任务中,LaS 相比匹配的 CLS 基线将语音解码准确率最高提升 17.15pp,并支持候选集复用、受试者与会话自适应,以及 SSVEP 中条件性的未见频率解码。

来源:arXiv cs.AI · arxiv.org