跳到正文
热点事件持续更新

Zero2Repo 基准发布

1 篇报道1 个报道来源11 小时前更新

先了解这件事

AI 综述

2026年10月20日,arXiv上线论文介绍Zero2Repo基准。该基准测试编码智能体在空工作区根据需求文档和接口契约交付完整代码仓库的能力。基准支持Python、TypeScript、Go和C++任务,采用二值奖励机制。在11个高频任务测试中,最强智能体仅解决10个,主要失败原因是遗漏单一规则。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月20日
  1. arXiv · AI
    Zero2Repo:评测编码智能体从零构建软件仓库的能力

    Zero2Repo 是一个从零构建代码仓库的评测基准,要求智能体根据需求文档和接口契约在空工作区交付完整项目。 该基准通过语言无关的流水线生成任务,当前包含 Python、TypeScript、Go 和 C++ 任务,采用二值奖励且不使用 LLM 裁判。在 11 个高频任务中,最强智能体仅解决 10 个,失败案例多源于对单一规则的遗漏。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。