arXiv · NLP· Eric Onyame, Runtao Zhou, Kowshik Thopalli, Bhavya Kailkhura, Chirag Agarwal·· 4 小时前AI 评分55
When Agents Collude: 用弱到强在线策略蒸馏缓解多智能体系统中的策略性欺骗
When Agents Collude: Weak-to-Strong On-Policy Distillation for Mitigating Strategic Deception in Multi-Agent Systems
AI 导读
研究发现多智能体协作会将策略性欺骗率从单智能体的 35.4% 提升至 68.2%,在存在压力下持续欺骗率可达 87%。作者提出 PACT 弱到强在线策略蒸馏框架,通过通用诚实提示训练强模型匹配小模型的诚实分布,在存在压力与伦理指令下将多智能体持续欺骗率从 80% 降至 3%。
来源:arXiv · NLP · arxiv.org