arXiv · AI· Zichuan Xu, Haochen Zhang, Yuyang Dong, Makoto Onizuka, Chuan Xiao·· 8 小时前AI 评分23
MemShift：分离检测与修复以评估 LLM 衍生个人记忆
MemShift: Separating Detection from Repair in LLM-Derived Personal Memory
AI 导读
MemShift 提出基准测试，将 LLM 个人记忆的维护分解为检测和修复两个步骤。 该基准包含五种转变类型（源修订、删除等），并采用确定性评分器替代 LLM 评判。 评估四个开放权重 LLM 发现，检测效果受限于修复能力；LLM 编写的程序在类型化记录上可缩小与精确重算的差距。
来源：arXiv · AI · arxiv.org