arXiv · NLP· C\'elian Vasson, Daniil Ognev, Kentaro Inui, Benjamin Heinzerling·· 3 小时前AI 评分37
变量角色如何解释代码中的语言模型表示
Do LMs Know What Variables Do? Interpreting Code Representations via Variable Roles
AI 导读
研究使用 126,926 个代码文件评估大型语言模型对变量角色的理解。 残差探针比稀疏自编码器(SAE)特征表现更好,但结合 SAE 特征可缩小差距。 生成干预常改变角色注释但牺牲正确性,且测试通过时无明显优势。
来源:arXiv · NLP · arxiv.org