arXiv · ML· Muhammad Usama, Muhammad Saad Qadir·· 2 天前AI 评分33
模型更新“声明变更包”的统计认证:LoRA与全量微调中的泄漏效应
Where Did the Update Go? Certifying Declared Change Envelopes for Model Updates
AI 导读
研究形式化“声明变更包”以认证模型更新是否仅在预设区域改变行为。测试发现LoRA及全量微调更新在声明范围外造成7%-36%的决策泄漏。 锚定LoRA、GRPO及小学习率全量微调可将泄漏控制在5%,而开放式聊天无法通过此类认证。
来源:arXiv · ML · arxiv.org