跳到正文
热点事件持续更新

AdaRoll-GRPO优化LLM后训练rollout分配

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

Faeze Moradi Kalarde等人提出AdaRoll-GRPO方法,基于Bayes自适应MDP优化GRPO训练中的rollout分配策略。 该方法将难度感知分配建模为序贯决策问题,在固定总预算下学习自适应分配策略,离线计算策略以避免在线优化开销。 实验在多个推理数据集和LLM架构上验证,AdaRoll-GRPO训练性能优于标准GRPO。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. arXiv · AI
    AdaRoll-GRPO:基于贝叶斯自适应 MDP 优化 GRPO 训练的 rollout 分配

    AdaRoll-GRPO 提出基于 Bayes-adaptive MDP 的自适应 rollout 分配策略,在固定总预算下提升 GRPO 训练性能。该策略将难度感知分配建模为序贯决策问题,离线计算策略避免在线优化开销。实验在多个推理数据集和 LLM 架构上验证了该方法优于标准 GRPO。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。