arXiv · AI· Zimo Ji, Zongjie Li, Pingchuan Ma, Wenyuan Jiang, Yudong Gao, Shuai Wang·· 6 小时前精选AI 评分68
Measuring the Permission Gate: A Stress-Test Evaluation of Claude Code's Auto Mode 发布：对 Claude Code 自动模式权限系统的压力测试评估
Measuring the Permission Gate: A Stress-Test Evaluation of Claude Code's Auto Mode
AI 导读
研究团队发布了对 Claude Code 自动模式权限系统的独立评估，指出该机制在处理用户意图明确但范围模糊的任务时存在防御缺口。使用包含 128 个提示词的 AmPermBench 基准，评估了 253 个状态变更操作，端到端漏报率（FNR）达 81.0%，显著高于生产流量中的 17%。
推荐理由
论文通过独立压力测试揭示了 Claude Code 自动模式在模糊授权场景下的防御盲区，指出文件编辑路径未被覆盖导致漏报率高达 81%。
来源：arXiv · AI · arxiv.org