arXiv · AI· Chengquan Guo, Zhaorun Chen, Zinan Lin, Xiaodong Liu, Bo Li·· 2026-10-15AI 评分45
AgentCIScope: LLM Agent 情境完整性评估基准
AgentCIScope: Grounded Contextual Integrity Evaluation for LLM Agents
AI 导读
提出 AgentCIScope 平台,通过 936 个可执行任务评估 12 个 LLM agent 的情境完整性(contextual integrity)。 单次运行泄露率 32.5%-94.4%,重复五次后增加 4-19 个百分点;个人信息和预订细节泄露率最高,日历是主要信息源。 作为统一测试床,为开发隐私保护 agent 提供深度洞察。
来源:arXiv · AI · arxiv.org