跳到正文
arXiv cs.CL· Gilad D. Landau, Dulhan Jayalath, Oiwi Parker Jones·· 4 小时前AI 评分29

Brain2Semantics2Text:用语义表征实现非侵入式语音解码

The Semantic Bottleneck: Leveraging Semantic Representations for Non-Invasive Speech Decoding

AI 导读

Brain2Semantics2Text 通过中间语义嵌入空间重建文本,将句子级 MEG 响应映射到语义流形,再反演为自然语言,无需词级对齐即可恢复高层语义。该方法针对非侵入式神经记录信噪比低、难以细粒度重建音素或单词的问题,利用跨皮层分布且时间尺度更慢的高层语义表征作为解码目标。与既有非侵入式 Brain2Text 方法相比,其句子级结果有所提升。

来源:arXiv cs.CL · arxiv.org