跳到正文
arXiv · NLP· Nimun Bajwa, Massimo Poesio·· 3 小时前AI 评分23

Llama-3.1-8B-Instruct 中探测与引导安全相关行为的研究

Probing and Steering for Safety-Relevant Behaviours in Large Language Models

AI 导读

研究在 Llama-3.1-8B-Instruct 上测试激活探针,发现欺骗和高风险行为中逻辑回归检测最优而均值差引导最优,但谄媚行为模式反转。不同行为的最佳 pooling 方案和层级选择存在差异,且最优引导层级可能早于最优检测层级。导出探针可支持交互界面直接评分和引导文本输出。

来源:arXiv · NLP · arxiv.org