arXiv · AI· Prabal Vashisht, Zheng Hu, Ying Yang·· 2 小时前AI 评分28
生产级对话智能体中基于可复现评估的安全提示词压缩方法
Reproducible Evaluation as the Substrate for Safe Prompt Compression in Production Agents
AI 导读
研究提出离线评估工具,在实时企业数据变动下保持生产级对话智能体评估可复现,并在失效时按需重新生成。 该工具作为基于 GEPA 的提示词优化的适应度函数,结合正确性门控以防止奖励黑客。 应用于生产级商家智能体,提示词表面缩减 3.5-7.6% 且不降低留出任务正确率;在三个独立主题模型族中表现一致,且其中一个模型的正确性可测量提升。
来源:arXiv · AI · arxiv.org