arXiv · AI· Shihao Weng, Longtian Wang, Yang Feng, Mingfei Cheng, Jia Liu, Chao Shen, He Ye, Federica Sarro, Xiaofei Xie·· 12 小时前AI 评分43
当代码成为 LLM 调用:智能体系统中调用点契约的实证研究
When Code Becomes an LLM Call: An Empirical Study of Call-Site Contracts in Agentic Systems
AI 导读
40个开源智能体系统496个LLM调用点研究显示,仅5.3%满足完整契约,82%有检查但63%预期约束未被满足。 48%模型输出进入控制流且73%无人审核,代码执行78%约束,提示词中67%约束仅靠请求;10种模式解释99%差距,38个修复机制可解决所有问题。
来源:arXiv · AI · arxiv.org