arXiv · AI· Yubo Wang, Rui Meng, Jaehyun Nam, Tomas Pfister, Jinsung Yoon·· 23 小时前AI 评分42
ReproBridge:将可复现性融入机器学习研究工件
ReproBridge: Building Reproducibility into ML Research Artifacts
AI 导读
ReproBridge 通过构建标准化可复现工件,将四个模型的实验复现成功率从 76.4% 提升至 92.6%,并平均降低 API 支出 19.7%。 ReproBridge-Bench 包含 36 篇论文中的 387 个实验及 1029 个任务,消融研究表明移除代码和环境组件会导致成功率最大幅度下降。 该工作证明保留执行知识有助于低原始代码成功率的模型更可靠且更低成本地复现实验。
来源:arXiv · AI · arxiv.org