arXiv · NLP· Shuyu Guo, Wenxiang Hu, Yuyue Zhao, Lun Zhou, Yougang Lyu, Xiaohui Yan, Zhaochun Ren·· 3 天前AI 评分26
RubricReviewer:通过智能体证据合成与人机对齐生成,从直接批评转向基于评分标准的审稿
RubricReviewer: From Direct Critique to Rubric-Driven Review via Agentic Evidence Synthesis and Human-Aligned Generation
AI 导读
RubricReviewer 提出完全基于评分标准的框架,解决现有 LLM 审稿工具将标准推导与判断纠缠、范式片面化的两大结构性局限。 该框架将评分标准生成设为显式中间步骤,结合免训练智能体 Scout 收集外部证据与对齐模型 Aligner 消费证据,融合两种监督源优势。 实验显示其审稿比现有系统更全面具判别力,且对对抗性提示注入攻击展现最强鲁棒性,已被 EMNLP 2026 接收。
来源:arXiv · NLP · arxiv.org