跳到正文
arXiv · AI· Philipp Mondorf, Adrien Deli\`ege, Solim LeGris, Claas Beger, Ryan Yi, Barbara Plank, Brenden M. Lake, Todd M. Gureckis·· 8 小时前AI 评分30

ConceptARC at Scale: 研究推理模型中的概念理解

ConceptARC at Scale: Studying Conceptual Understanding in Reasoning Models

AI 导读

研究提出ConceptARC at Scale生成器,构建包含1,600个经人工审查任务的ConceptARC-100数据集。 该数据集涵盖16个概念,每个概念100个任务,规模是原基准的10倍。 内部表征分析显示,任务按对象操作类型聚类,表明模型形成了可泛化的稳定抽象。

来源:arXiv · AI · arxiv.org