arXiv · AI· Yunlong Wang, Alyssa Wu, Cuiyun Gao, Jia Feng, Songyuanyi Lu, Zhichao Hu·· 5 小时前AI 评分20
FeatureArc: 评估编码智能体处理功能演进的能力基准
FeatureArc: Benchmarking Coding Agents on Evolving Features
AI 导读
FeatureArc基准评估了编码智能体处理功能演进的能力。在73个任务中，10个智能体的成功率为62.7%，但在整个功能上仅28.5%。 继承缺陷是后期失败的主要原因，在72.9%的失败后期阶段中存在。
来源：arXiv · AI · arxiv.org