arXiv cs.AI· Sam Siavoshian, Omar Ramadan, Amir K. Saeed, Benjamin A. Johnson, Benjamin M. Rodriguez·· 8 小时前AI 评分24
Engram Injection:参数化语言模型记忆的时间有效性研究
Engram Injection: A Study of Temporal Validity in Parametric Language-Model Memory
AI 导读
研究提出 Engram Injection,将事实存入 LoRA 适配器,并通过 FiLM 条件化在冻结的 Qwen2.5-3B-Instruct 上注入时钟信息,以检验模型能否仅凭问题和当前时间回答事实变更。在 62 对更新前后问题上,两种适配器方法在盲评下均答对 0 对,而全历史提示答对 59/62、检索答对 62/62。结果表明模型能学会存储事实,却难以学会何时使用它。
来源:arXiv cs.AI · arxiv.org