Hacker News AI·· 2026-10-02AI 评分62
Red Hat 实测:Jev 决策模型在准确率上未跑赢 LLM-as-a-judge 与传统分类器
Decision models like Jev don't beat LLM-as-a-judge or traditional classifiers
AI 导读
Red Hat 安全团队测试了 Jev、Qwen3.6、Nemotron 等 9 种 AI 护栏方案。在提示词注入和内容安全基准测试中,Jev 的准确率约为 86%,并未跑赢 LLM-as-a-judge(Qwen3.6 准确率 89%)或预训练分类器(准确率 89%)。预训练模型兼具极低延迟和极高准确率,而 Jev 等决策模型虽然支持零样本使用,但在速度和成本上并没有展现出压倒性的优势。
来源:Hacker News AI · developers.redhat.com