arXiv · ML· Kun Gu, De Cheng, Zhipeng Xu, Lingfeng He, Di Xu, Nannan Wang·· 3 小时前AI 评分31
M2LE:基于联合损失估计调节 LoRA 合并强度的持续学习方法
Modulating Merging Strengths via Joint Loss Estimation for LoRA-based Continual Learning
AI 导读
M2LE 提出通过联合损失估计调节 LoRA 合并强度,解决现有方法使用共享标量控制更新的局限。 该方法包含 HIM 和 TSP 两个组件,在多基准测试中持续优于现有 PEFT 持续学习方法。 M2LE 已被 NeurIPS 2026 接收,代码已公开。
来源:arXiv · ML · arxiv.org