跳到正文
Hacker News AI· leumon·· 9 天前AI 评分52

Singularity Gate:面向 AI 驱动范式转变科学发现的基准测试

Singularity Gate: Benchmark for AI-driven paradigm-shifting scientific discovery

AI 导读

Singularity Gate 是一个评估 AI 驱动范式转变科学发现的基准测试,其任务基于最新模型训练截止后才首次公开的科学发现,确保模型无法在训练中见过这些数据。该基准包含 80 个任务,其中 12 个被评为最范式颠覆的“Hard”集,所有模型均在 xhigh 推理强度、启用工具但关闭网络搜索的原生运行环境中测试。

来源:Hacker News AI · singularitygate.org