跳到正文
热点事件持续更新

六种检索结构多工具请求对比

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

Shuyang Zhang 团队发布研究,对比六种 LLM 工具检索结构在两个多工具测试床上的表现。测试床包括 345 条带专家依赖标签的 AppWorld 查询和 103 项覆盖 257 个 MCP 工具的 MCP-Bench 任务。 结果显示,无训练且单次 LLM 调用的检索结构在 AppWorld k=16 时完成率不足 10%。相比之下,训练后的集合级检索器仅需 75-90 条数据,在无 LLM 调用情况下即可达到 0.58 的完成率。 LLM 导航层级结构则需要 31-38 次调用,耗时约 5 分钟。研究指出,检索完整性直接决定智能体下游任务成功率。

AI 根据报道生成 · 48 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月2日
  1. arXiv · NLP
    LLM 智能体多工具请求的检索结构完整性与成本对比

    六种 LLM 工具检索结构对比显示,无训练且单次 LLM 调用的结构在 AppWorld k=16 时完成率不足 10%。 训练后的集合级检索器(75-90 条数据)无 LLM 调用即可达 .58 完成率;LLM 导航层级需 31-38 次调用耗时约 5 分钟。 检索完整性直接决定智能体下游任务成功率。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。