跳到正文
arXiv · AI· Zhiyuan Wang, Yuezhi Zhou, Zhu Zhang, Zhixing Tan·· 10 小时前AI 评分35

JWP 联合权重扰动:对抗大语言模型有害微调的鲁棒对齐防御

When Safety Fails Collectively: Robust Alignment Against Harmful Fine-Tuning via Joint Weight Perturbations

AI 导读

针对有害微调破坏大语言模型安全对齐的问题,研究提出 Joint Weight Perturbations(JWP)防御方法,通过屏蔽有害扰动的不同部分并进行联合训练,显著降低模型对累积扰动的敏感度。

来源:arXiv · AI · arxiv.org