跳到正文
Hacker News LLM· fruiapps·· 2026-10-15AI 评分74

SCM 项目复盘 48 个失败假设,证实模型尺寸是提升 LLM 分类器准确率的唯一有效杠杆

Hypotheses failures while training an LLM classifier

AI 导读

SCM 项目公开了基于 Qwen3 的开源 LLM 分类器训练过程中 48 个失败假设的完整数据记录。复盘发现增加训练数据、去偏校准和知识蒸馏均未能提升未见工作流的准确率,且部分方法存在数据泄露或许可证冲突问题;唯有增加模型参数量(从 4B 升至 14B)能显著提升未知任务表现。作者据此提出在实验前预注册验收规则并记录失败数据的研发方法论,为构建鲁棒分类系统提供了避坑参考。

来源:Hacker News LLM · hitl.systems