跳到正文
Berkeley AI Research·· 2026-03-13AI 评分38

Berkeley AI Research 提出 SPEX 和 ProxySPEX 算法以识别 LLM 交互

Identifying Interactions at Scale for LLMs

AI 导读

Berkeley AI Research 介绍了 SPEX(Spectral Explainer)和 ProxySPEX 算法,旨在通过消融(ablation)在大规模下识别驱动 LLM 行为的关键交互。SPEX 利用稀疏性和低度性质(low-degreeness)将搜索转化为稀疏恢复问题;ProxySPEX 额外利用层级结构(hierarchy),在保持性能的同时将所需消融次数减少约 10 倍。

来源:Berkeley AI Research · bair.berkeley.edu