arXiv · ML· Patrick Krauss, Achim Schilling, Andreas Maier, Thomas Kinfe, Claus Metzner·· 13 小时前AI 评分34
神经网络权重空间中保留可解码的学习轨迹信息
Learning Trajectories Leave Decodable Traces in Neural Network Weight Space and Internal Representations
AI 导读
研究发现神经网络最终权重保留选择性历史信息,30个网络在10个候选中准确匹配初始权重。 线性探针以100%准确率解码任务顺序,2157对端点显示低损失连接,表明共享任务未抹除个体学习历程。
来源:arXiv · ML · arxiv.org