arXiv · NLP· Kenan Li, Qirui Jin, Liao Zhu, Xiaosong Huang, Yijia Wu, Yikai Zhang, Xin Zhang, Zijian Jin, Yufan Huang, Elsie Nallipogu, Chaoyun Zhang, Yu Kang, Saravan Rajmohan, Qingwei Lin, Wenke Lee, Dongmei Zhang·· 2026-10-16AI 评分33
ORACLE-SWE:量化关键信息信号对 SWE Agents 的贡献
ORACLE-SWE: Quantifying the Contribution of Critical Information Signals on SWE Agents
AI 导读
ORACLE-SWE 量化了 oracle 和 agent 提取信号对 SWE 任务成功的贡献,并测量了两者间的差距。 该研究涵盖 Reproduction Test、Regression Test、Edit Location、Execution Context 及 API Usage 信号。 代码和 oracle-signal 数据集已作为可重用方法发布。
来源:arXiv · NLP · arxiv.org