arXiv · ML· Jin Liu, Ning Xi, Yinbin Miao, Junkang Liu, Ke Cheng, Jianfeng Ma·· 2026-10-14AI 评分35
DP-SPA:用于差分隐私持续 LoRA 的稳定-可塑子空间构建方法
Stable-Plastic Subspace Construction for Differentially Private Continual LoRA
AI 导读
针对差分隐私持续学习中的遗忘问题,研究提出 DP-SPA 方法,通过构建稳定与可塑子空间消除双线性噪声交互。 DP-SPA 固定子空间基底,仅对 LoRA 因子进行隐私优化,并在合并前基于更新能量重标定系数。 在 5 个数据集、8 种设置下的实验表明,该方法提升了平均准确率并减少了遗忘。
来源:arXiv · ML · arxiv.org