跳到正文
arXiv · AI· Sizhe Chen, Sanjay Kariyappa, Liwei Jiang, Chong Xiang, Jihye Choi, Chaowei Xiao, G. Edward Suh·· 1 天前AI 评分39

通过目标间冲突学习提升大模型指令层级

Improving Instruction Hierarchy by Learning from Goal-Goal Conflicts

AI 导读

研究揭示现有指令层级训练缺失目标间冲突类型,微调 Qwen3.5-9B 和 Gemma4-12B-it 后在未见任务上显著改善指令层级遵循。 新增该冲突示例后,八个基准测试中无冲突任务的平均效用变化极小,证实该方法有效。

来源:arXiv · AI · arxiv.org