跳到正文
arXiv · AI· Prabal Vashisht, Zheng Hu, Ying Yang·· 2 小时前AI 评分28

生产级对话智能体中基于可复现评估的安全提示词压缩方法

Reproducible Evaluation as the Substrate for Safe Prompt Compression in Production Agents

AI 导读

研究提出离线评估工具,在实时企业数据变动下保持生产级对话智能体评估可复现,并在失效时按需重新生成。 该工具作为基于 GEPA 的提示词优化的适应度函数,结合正确性门控以防止奖励黑客。 应用于生产级商家智能体,提示词表面缩减 3.5-7.6% 且不降低留出任务正确率;在三个独立主题模型族中表现一致,且其中一个模型的正确性可测量提升。

来源:arXiv · AI · arxiv.org