跳到正文
arXiv · AI· Zongyao Zhao, Cheng-Jie Zhao, Ruihang Jiang, Bing Zheng, Zhaolin Wang, Yuanwei Liu·· 2 小时前AI 评分22

MART-GRPO 用于 VLA 强化学习:基于鞅截断策略

When to Stop Penalizing Actions? Martingale GRPO for VLA Reinforcement Learning

AI 导读

MART-GRPO 在 VLA 强化学习中通过事件引导截断优化 GRPO,利用 VLM 和 LoRA 精准定位错误区间,在保留失败反馈的同时移除后续冗余梯度。 该算法基于 RoboTwin 2.0 数据集进行实验验证,结果显示其在多项任务中的成功率显著优于传统全轨迹 GRPO 方法。

来源:arXiv · AI · arxiv.org