arXiv · AI· Sizhe Chen, Sanjay Kariyappa, Liwei Jiang, Chong Xiang, Jihye Choi, Chaowei Xiao, G. Edward Suh·· 1 天前AI 评分39
通过目标间冲突学习提升大模型指令层级
Improving Instruction Hierarchy by Learning from Goal-Goal Conflicts
AI 导读
研究揭示现有指令层级训练缺失目标间冲突类型,微调 Qwen3.5-9B 和 Gemma4-12B-it 后在未见任务上显著改善指令层级遵循。 新增该冲突示例后,八个基准测试中无冲突任务的平均效用变化极小,证实该方法有效。
来源:arXiv · AI · arxiv.org