arXiv · ML· Nils Grandien, David Steinmann, Felix Friedrich, Kristian Kersting·· 2026-10-07AI 评分34
稀疏自编码器是否能学到有意义的概念层级?
Do Sparse Autoencoders Learn Meaningful Concept Hierarchies?
AI 导读
研究指出稀疏自编码器(SAE)虽为特征空间提供合理层级基础,但确立良好层级结构仍具挑战性。 分析发现特征吸收的硬性与软性形式均系统性损害层级质量,揭示了未来方法需解决的深层矛盾。 这确立了无监督概念发现中通用化/特化层级的评估协议与关键需求。
来源:arXiv · ML · arxiv.org