arXiv · AI· Guorui Chen, Tao Liu, Zhenzhen Huang, Yidan Zhang, Liyu Jiang, Shuoyuan Wang, Hanchen Sun, Xu He, Dong Li, Yihan Hu, Jianye Hao, Lei Feng·· 4 小时前AI 评分28
MemDev-Bench：基于真实仓库历史评估记忆系统对代码智能体的影响
MemDev-Bench: Does Memory Help Code Agents?Benchmarking Memory Systems over Real Repository Histories
AI 导读
MemDev-Bench 针对 555 个基础任务构建 4,869 个历史任务，评估记忆系统对代码智能体的作用。 记忆系统提升了细粒度定位与编辑的功能正确率，但无关历史会增加因盲目复用导致的失败。 直接提供原始历史轨迹比使用记忆系统能显著减少智能体执行步骤，保留过程信息至关重要。
来源：arXiv · AI · arxiv.org