arXiv · AI· Tingyue Pan, Mingyue Cheng, Daoyu Wang, Yitong Zhou, Jie Ouyang, Qi Liu, Enhong Chen·· 2026-10-14AI 评分32
ScholarQuest:面向智能体学术搜索的分类学引导基准
ScholarQuest: A Taxonomy-Guided Benchmark for Agentic Academic Paper Search in Open Literature Environments
AI 导读
ScholarQuest 提出一个基于分类学的学术搜索基准,涵盖 1000 多个计算机主题和 4 类研究意图,并构建百万级文献环境 ScholarBase。 其答案集通过多源检索和引用扩展生成,支持多轮评估;智能体方法优于单次检索,但最佳系统 Recall@100 仅 0.312。 研究揭示规划器 token 消耗与召回率无必然正相关,基准和工具链已开源以支持可复现研究。
来源:arXiv · AI · arxiv.org