arXiv · AI· Shyam Agarwal, Olga Lvova, Agnia Sergeyuk, Anastasiia Serova, Timofey Bryksin, Thomas Zimmermann, Bogdan Vasilescu·· 9 天前AI 评分40
JetBrains 工程师 token 消耗与工程产出相关性案例研究
The AI Era's Lines of Code? A Case Study on What an Engineer's Token Spend Measures
AI 导读
JetBrains 对 404 名工程师的数据分析显示,token 消耗主要反映 AI 智能体使用广度而非工程产出价值。 两周内 commit 数量相似的工程师中,90 分位 token 消耗是 10 分位的 39 至 240 倍;单工程师内消耗翻倍仅对应约 10% 的 commit 增量。 建议仅将 token 消耗用于资源核算,通过任务与结果证据评估 AI 辅助工作效能。
来源:arXiv · AI · arxiv.org