Hacker News AI· Bootstrapper909·· 3 小时前AI 评分43
Claude Code 护栏对 AI 编码智能体效果的影响:270 次实验结果
Do Guardrails Make AI Coding Agents Better? What 270 Runs Showed
AI 导读
270 次无监督运行显示,AI 编码智能体的护栏机制并未提升首次通过率,且单模型成本差异远大于护栏影响。 实验涵盖 Sonnet、Opus、Haiku 三个模型,Haiku 每次采纳变更成本最低($0.04-$0.06),Opus 最高($0.82-$0.97)。 结果基于特定小代码库,作者通过伴随仓库开放了复现数据与脚本供独立验证。
来源:Hacker News AI · secondtimeisabug.com