跳到正文
Hacker News AI· depthfirst·· 42 分钟前AI 评分75

Contextflo 团队测试:四篇短笔记比公司文档更有效地提升 AI 智能体准确率

Show HN: Company docs didn't help our AI agent. Four shortnotes doubled accuracy

AI 导读

Contextflo 团队使用 Adyen 和 Hugging Face 提供的 DABstep 支付数据集,测试了 Claude Haiku 5.5 在有无上下文时的表现。结果显示,仅添加公司文档时,智能体在 held-out 测试集上的准确率为 36%,但成本降低;加入四篇针对隐性业务规则的短笔记后,准确率提升至 76%,单次回答成本降至不足 2 美分。

来源:Hacker News AI · contextflo.com