FS-EWC: Fisher-Shaped EWC for replay-free continual learning
热点事件持续更新
FS-EWC: Fisher-Shaped EWC for replay-free continual learning
1 篇报道1 个报道来源4 小时前更新
先了解这件事
AI 综述
Liying Wang, Simone Magistri, Joost van de Weijer 提出 Fisher-Shaped EWC(FS-EWC)方法,面向无重放持续学习。其核心是把 Fisher 信息矩阵(FIM)的作用从“保护参数”扩展到“塑造未来保留解”:通过在预定邻域内最小化最坏经验 FIM 迹,得到对有限参数位移不敏感的未来保留解,并在任务完成时利用基于轨迹的模型合并来构建保留解。实验表明 FS-EWC 在多个基准上优于 EWC,呈现更优的稳定-可塑性平衡与参数漂移容忍度,并揭示有效知识保留需同时实现未来导向的解构建与已获知识保护。
AI 根据报道生成 · 2 小时前更新
最新进展10月28日 12:00
无重放持续学习中的 Fisher-Shaped EWC 算法报道时间线
沿着报道,了解事件的不同侧面。
10月28日
- arXiv · AI无重放持续学习中的 Fisher-Shaped EWC 算法
提出 Fisher-Shaped EWC(FS-EWC)方法,通过在预定邻域内最小化最坏经验 FIM 迹来形成对有限参数位移不敏感的未来保留解,并在任务完成时通过基于轨迹的模型合并构建保留解。实验显示 FS-EWC 在多个基准上优于 EWC,具有更优的稳定-可塑性平衡和参数漂移容忍度。 该研究表明有效的知识保留需同时实现未来导向的解构建与已获知识保护。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。