arXiv · AI· Andrew Bistras, Marty Johnson·· 4 小时前AI 评分21
The Router Already Knows:基于 Gemma 4 路由的 NR-SAE 稀疏字典解释力研究
The Router Already Knows
AI 导读
在 Gemma 4 26B-A4B 第 15 层,NR-SAE 解释 0.518 的方差。 排名控制组 0.481,架构控制组 0.387。 语义可解释性未测试。
来源:arXiv · AI · arxiv.org