跳到正文
arXiv · ML· Andrea Vasco Grieco, Evelyn D'Elia, Edoardo Caldarelli, Raffaello Camoriano·· 5 小时前AI 评分31

探究 PPO 策略方差与强化学习中可塑性丧失的因果机制

Bridging Exploration and Loss of Plasticity in On-Policy Reinforcement Learning

AI 导读

研究分析了近端策略优化(PPO)在等方高斯策略下的可塑性丧失(LoP),发现策略标准差 $\sigma$ 显著影响 LoP 程度。 该工作提供了理论与实验论证,解释了常用缓解技术的有效性,并在 7-DoF 机械臂部署中进行验证。

来源:arXiv · ML · arxiv.org