跳到正文
arXiv · AI· Victor May, Diganta Misra, Yanqi Luo, Anjali Sridhar, Justine Gehring, Silvio Soares Ribeiro Junior·· 2026-10-06AI 评分26

FreshBrew:评估 AI 智能体 Java 代码迁移的新基准

FreshBrew: A Benchmark for Evaluating AI Agents on Java Code Migration

AI 导读

研究者推出 FreshBrew,一个评估 AI 智能体在项目级 Java 迁移中表现的新基准,重点关注程序语义保持与避免 reward hacking。在 228 个基于 JDK 8、在 JDK 17 上构建失败且测试覆盖率高的 Maven 仓库上,表现最佳的 Gemini 2.5 Flash 成功将 52.3% 的项目迁移至 JDK 17。

来源:arXiv · AI · arxiv.org