arXiv · NLP· Amit Nautiyal·· 2026-10-08AI 评分42
BehaviorTrace 揭示在线强化学习中训练数据归因的局限性
Which Rollout Taught It That? BehaviorTrace and the Limits of Training-Data Attribution in Online RL
AI 导读
针对在线 RL 微调中的行为归因问题,研究者开源了评测框架 BehaviorTrace。在 Qwen2.5-1.5B 模型测试中,仅按梯度大小排序即可达到 4.2-4.5 倍随机水平,且流畅度预测效果优于所有梯度方法。
来源:arXiv · NLP · arxiv.org