研究者提出首个LLM记忆遗忘基准Bemula
热点事件持续更新
研究者提出首个LLM记忆遗忘基准Bemula
1 篇报道1 个报道来源7 小时前更新
先了解这件事
AI 综述
研究者提出 Bemula,称其为首个专门评测 LLM 智能体记忆遗忘能力的基准。该基准包含 50 个多轮对话实例、6 类共 135 条遗忘请求和 1742 道测试题,用于检验智能体能否按要求“忘掉”指定记忆。 在 6 个主流记忆系统与 3 个 backbone LLM 上的评测显示,没有任何系统端到端通过超过 1.5% 的遗忘请求,多数系统一条都未通过。
AI 根据报道生成 · 1 小时前更新
最新进展10月15日 12:00
Bemula:LLM 智能体记忆遗忘基准测试报道时间线
沿着报道,了解事件的不同侧面。
10月15日
- arXiv cs.AIBemula:LLM 智能体记忆遗忘基准测试
研究者提出 Bemula,首个专门评测 LLM 智能体记忆遗忘能力的基准,包含 50 个多轮对话实例、6 类共 135 条遗忘请求和 1742 道测试题。在 6 个主流记忆系统与 3 个 backbone LLM 上评测,没有任何系统端到端通过超过 1.5% 的遗忘请求,多数系统一条都未通过。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。