arXiv · ML· Gunel Jahangirova, Nargiz Humbatova, Jinhan Kim, Shin Yoo, Paolo Tonella·· 9 小时前AI 评分30
深度学习真实故障基准：仅 15.4% 故障通过现实性检验
Real Faults in Deep Learning Fault Benchmarks: How Real Are They?
AI 导读
研究对 5 个基准中 305 个深度学习故障进行人工分析，发现仅 15.4% 的故障满足“真实”标准。 该研究聚焦于故障与原始代码来源的对应程度、故障类型分布及可复现性，结果发现仅 54% 的故障复现尝试成功。 这揭示了当前 DL 故障检测与修复评估所依赖的基准数据存在显著的现实性缺陷，影响了技术有效性验证的可靠性。
来源：arXiv · ML · arxiv.org