arXiv · AI· Tural Mehtiyev, Biruk Tadesse, Lawrence Arkoh, Wesley Assun\c{c}\~ao·· 11 天前AI 评分28
研究揭示 Claude Code 中陈旧指令文件导致智能体隐性成本
When Instruction Files Go Stale: Documentation Debt and Hidden Cost in Coding Agents
AI 导读
研究表明 LLM 编码智能体在执行任务时易受陈旧指令文件影响,产生额外隐性成本。 研究分析 732 条轨迹发现,Claude Sonnet 5.5 面对陈旧测试指令平均多出 2 次工具调用。 该结果指出仅关注任务成功率无法反映文档债务成本,需扩展评估维度。
来源:arXiv · AI · arxiv.org