跳到正文
arXiv · NLP· Simiao Ren, Kidus Zewde, Xingyu Shen, Yuchen Zhou, Dennis Ng, Ankit Raj, Tommy Duong, Yuxin Zhang, Neo Tiangratanakul·· 4 小时前AI 评分40

Open-Jev 在 CallScreenBench 上的判决:基于小型语言模型校准的一次性诈骗筛查

Open-Jev Judgments on CallScreenBench: Calibrated One-Pass Scam Screening with a Small Language Model

AI 导读

Qwen3-4B 通过 LoRA 微调,在 CallScreenBench 上实现 AUROC 0.974 和 64.5ms 单次决策。 模型在 41 个场景中未产生误报,且比 LLM 裁判提前 1.14 轮做出决策。 验证了基于读出的校准方法优于传统生成式微调,贡献在于评估协议而非架构创新。

来源:arXiv · NLP · arxiv.org