跳到正文
arXiv cs.LG· Syed Ibrahim Omer, Ginny Y. Wong. Xiangyu Zhao·· 6 小时前AI 评分18

MaRK:面向状态空间模型动态算子条件化的马尔可夫自适应循环核

MaRK: Markov-adapted Recurrent Kernels for Dynamic Operator Conditioning in State Space Models

AI 导读

MaRK 是一种动态算子条件化框架,可将上下文向量直接映射为冻结 SSM 循环参数 A、B、C、D 和 Δ 的有界调制,在 111M 参数的 Hydra SSM 主干上仅需 6.3–11M 可训练辅助参数即可从双向目标过渡到迭代扩散机制。

来源:arXiv cs.LG · arxiv.org