arXiv · AI· Xiaobo Chen, Genliang Zhu, Ziyuan Wang, Chu Wang·· 23 小时前AI 评分32
API 迁移后 LLM 代码修复的隐性失败
Accepted but Wrong: Silent Failures of LLM Code Repairs after API Migrations
AI 导读
LLM 修复的代码在 API 迁移后可能运行正常但返回错误结果，研究记录了这种隐性失败。 在覆盖 CPython、SQLite 等 73 个任务中，基于典型输入的断言检查发布了 0.410 的错误修复，而使用边缘输入可将该比例降至 0.065。 这表明常规测试不足以发现所有错误，需引入更严格的验证机制。
来源：arXiv · AI · arxiv.org