跳到正文
热点事件持续更新

独立研究指出Claude Code自动模式权限测试漏报率达81%

1 篇报道1 个报道来源6 小时前更新

先了解这件事

AI 综述

近期,研究团队发布了对 Anthropic Claude Code 自动模式权限系统的独立压力测试评估。该研究指出,该机制在处理用户意图明确但范围模糊的任务时存在防御缺口。 评估使用包含 128 个提示词的 AmPermBench 基准,重点考察用户意图清晰但目标范围、影响半径或风险水平界定不清的“刻意模糊授权”场景。该基准涵盖四个 DevOps 任务家族和三个受控的模糊性轴。 该团队在 AmPermBench 基准上对 253 个状态变更操作进行了独立操作级评估,与“预言机”真值进行了比对。评估结果显示,该系统的端到端漏报率(FNR)达到 81.0%,显著高于日常生产流量中观察到的 17%。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月23日
  1. arXiv · AI精选
    Measuring the Permission Gate: A Stress-Test Evaluation of Claude Code's Auto Mode 发布:对 Claude Code 自动模式权限系统的压力测试评估

    研究团队发布了对 Claude Code 自动模式权限系统的独立评估,指出该机制在处理用户意图明确但范围模糊的任务时存在防御缺口。使用包含 128 个提示词的 AmPermBench 基准,评估了 253 个状态变更操作,端到端漏报率(FNR)达 81.0%,显著高于生产流量中的 17%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。