arXiv · AI· Philipp Mondorf, Adrien Deli\`ege, Solim LeGris, Claas Beger, Ryan Yi, Barbara Plank, Brenden M. Lake, Todd M. Gureckis·· 8 小时前AI 评分30
ConceptARC at Scale: 研究推理模型中的概念理解
ConceptARC at Scale: Studying Conceptual Understanding in Reasoning Models
AI 导读
研究提出ConceptARC at Scale生成器,构建包含1,600个经人工审查任务的ConceptARC-100数据集。 该数据集涵盖16个概念,每个概念100个任务,规模是原基准的10倍。 内部表征分析显示,任务按对象操作类型聚类,表明模型形成了可泛化的稳定抽象。
来源:arXiv · AI · arxiv.org