跳到正文
arXiv · AI· Yinuo Liu·· 6 小时前AI 评分41

RLVR 中无免费午餐:pass@1 提升必有 pass@k 代价

There Is No Free Lunch in RLVR: Every pass@1 Gain Has a pass@k Price

AI 导读

研究者证明在可验证奖励强化学习(RLVR)中,提升 pass@1 指标必然导致大采样预算下的 pass@k 性能下降。 模型理论显示,该反转是机制内在的代价;消除交叉点会损失全部 pass@1 增益,无法拓宽推理边界。

来源:arXiv · AI · arxiv.org