跳到正文
arXiv cs.AI· Xupeng Chen, Chenqian Le·· 8 小时前AI 评分31

Jev 作为记忆退休门控的预注册评估:二元门控不应直接删除记忆

Suggested Is Not Superseded: A Pre-Registered Evaluation of a System-One Model as a Memory-Retirement Gate

AI 导读

针对助手长期记忆中新语句何时应退休旧存储声明的问题,研究者用 500 对测试样本评估了类型化 System One 决策模型 Jev。在 STALE 标记为变更的 179 对中仅 72 对达到既定变更标准,二元门控对仅被暗示变更的声明过早退休率达 39.2%,改为三路决策后降至 15.5%,但检测代价 15.3 点超出预注册的 10 点预算。

来源:arXiv cs.AI · arxiv.org