跳到正文
arXiv · AI· Anna Gogleva, Thomas Charman, Martin Balla, Karl Gemayel·· 17 天前AI 评分29

LUCA:用于实验推理的合成世界

LUCA: A Synthetic World for Experimental Reasoning

AI 导读

研究团队提出可配置合成环境 LUCA,用于在已知真值下评估智能体实验过程。 该系统让智能体在有限预算下学习监管系统,并独立测试实验选择、预测、诊断及干预能力。 跨七个前沿 LLM 测试显示,各模型诊断能力差异达 7 倍,而预测差异仅 1.4 倍。

来源:arXiv · AI · arxiv.org