arXiv · AI· Bofan Xie, Chaokun Wang, Guanchen Ge, Songyao Wang, Fang Niu, Hang Zhang, Wei Wang·· 2026-10-14AI 评分35
首个记忆遗忘基准 Bemula 发布:现有 LLM Agent 无法实现用户请求的精准遗忘
Can Agents Forget When Asked? A Benchmark for Memory Unlearning in LLM Agents
AI 导读
首个 LLM Agent 记忆遗忘基准 Bemula 发布,现有六大主流记忆系统在全部测试中,端到端处理遗忘请求的成功率均低于 1.5%,绝大多数甚至完全失败。 该基准包含 50 个多轮对话、135 条遗忘请求及 1,742 道测试题,验证发现系统要么无法删除指定信息,要么误删了无关记忆。 这表明 Agent 的记忆系统设计仍面临重大挑战,相关数据与代码已开源。
来源:arXiv · AI · arxiv.org