跳到正文
热点事件持续更新

VPD语言模型分解方法发布及鲁棒性缺陷争议

2 篇报道2 个报道来源3 小时前更新

先了解这件事

AI 综述

2026年10月16日,Lucius Bushnaq等人发布对抗性参数分解(VPD)方法,将语言模型参数分解为少数能解释网络行为的简单子组件,该方法在消融部分组件后仍能保持输入输出行为一致。 10月20日,评估方发现已发布的4层67M参数模型分解存在系统性缺陷。证据显示,对抗搜索在20步后发现的faithfulness缺陷能从训练集输入迁移到未见输入,表明分解不鲁棒,且训练阶段使用的对抗器未能防止此类弱点。

AI 根据报道生成 · 2 小时前更新

事件进展

2 个进展

  1. 10月20日 23:24 · 1 篇报道
    VPD评估对抗发现系统性缺陷
    LessWrong · All Posts:VPD 评估对手发现已发布分解存在系统性缺陷
  2. 10月16日 12:00 · 1 篇报道
    提出VPD语言模型参数分解方法
    arXiv · ML:语言模型参数解释

报道时间线

沿着报道,了解事件的不同侧面。

10月20日
  1. LessWrong · All Posts
    VPD 评估对手发现已发布分解存在系统性缺陷

    VPD 评估对手在 4 层 67M 参数语言模型中找出系统性缺陷,faithfulness 缺陷在 20 步后从训练集输入迁移到未见输入。 这表明对抗搜索并非仅利用特定输入的干扰噪声,且训练阶段使用的对抗器未能防止此类系统性弱点。

10月16日
  1. arXiv · ML
    语言模型参数解释

    新提出对抗性参数分解(VPD)方法,将语言模型参数分解为少数能解释网络行为的简单子组件。 方法在消融部分组件后仍能保持输入输出行为一致,支持新的电路分析。

本事件热度走势

可比范围当前
9
可比范围峰值
1010月16日 13:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。