跳到正文
arXiv cs.LG· Taylan Soydan, Miguel A. Bessa, Dirk Mohr, Rui Barreira·· 7 小时前AI 评分22

TIDES:选择性状态空间模型中的隐式时间感知

TIDES: Implicit Time-Awareness in Selective State Space Models

AI 导读

研究者提出 TIDES,一种选择性 SSM 变体,将输入依赖性从时间步长移至对角状态矩阵,使模型像 S5 一样保持物理时间间隔,从而原生处理不规则时间戳,同时不牺牲 Mamba 等选择性 SSM 的逐 token 表达能力。

来源:arXiv cs.LG · arxiv.org