arXiv · AI· Solomon Shalom Lijo·· 5 小时前AI 评分29
数一数创口贴:衡量 AI 节省时间的框架与实证分析
Counting the Bandages: On measuring the time that AI saves
AI 导读
文章提出以“账本视角”取代“秒表视角”评估 AI 节省时间,定义盈亏平衡缺陷成本作为决策指标。 基于 METR 的 246 个开发问题数据,估算显示 AI 导致 19% 至 24% 的减速,且 AI 仅在 3% 至 82% 的问题中有帮助。 在 GDPval 工作流中,审查时间使 GPT-5 的加速上限仅为 3.6 倍。
来源:arXiv · AI · arxiv.org