跳到正文
arXiv · NLP· C\'elian Vasson, Daniil Ognev, Kentaro Inui, Benjamin Heinzerling·· 3 小时前AI 评分37

变量角色如何解释代码中的语言模型表示

Do LMs Know What Variables Do? Interpreting Code Representations via Variable Roles

AI 导读

研究使用 126,926 个代码文件评估大型语言模型对变量角色的理解。 残差探针比稀疏自编码器(SAE)特征表现更好,但结合 SAE 特征可缩小差距。 生成干预常改变角色注释但牺牲正确性,且测试通过时无明显优势。

来源:arXiv · NLP · arxiv.org