跳到正文
arXiv · AI· Hui Chen, Antoine Didisheim, Mo Pourmohammadi, Luciano Somoza, Hanqing Tian·· 3 小时前AI 评分36

使用稀疏自编码器对 LLM 进行金融大脑扫描

A Financial Brain Scan of the LLM

AI 导读

研究利用稀疏自编码器(SAE)对 LLM 内部激活进行“大脑扫描”,将内部激活映射为可解释概念并实现特征定向引导。 SAE 相比提示词能更平滑、孤立地引导目标概念,且扫描揭示模型内部特征贡献与其自生成解释存在显著脱节,证明这些解释不可靠。 SAE 为现有模型提供轻量级干预手段,可生成可解释嵌入并帮助研究人员削弱特定经济偏见。

来源:arXiv · AI · arxiv.org