arXiv · AI· Giang Son Nguyen, Wray Buntine, Dung D. Le, Wenya Wang·· 4 小时前AI 评分25
多语言LLM中否定表示的因果分析:"Not"并非失译
"Not" is Not Lost in Translation: A Causal Analysis of Negation Representations in Multilingual LLMs
AI 导读
研究发现多语言大语言模型中否定表示具有跨语言共享性且可被因果控制。基于六个开源模型在英法越中四语的干预实验,单一稀疏自编码器特征即可控制极性。 研究使用合成对比数据集及FLORES-200衍生否定翻译数据集,证明提取的对比激活方向在不同语言间高度对齐。干预效果可泛化至另外四种语言及FLORES衍生句子。 作者已开放数据与代码以支持后续研究。
来源:arXiv · AI · arxiv.org