The Decoder· Maximilian Schreiner·· 3 小时前AI 评分57
Artificial Analysis 新版智能指数拉开开源与闭源模型差距
New Artificial Analysis index widens the gap between open and closed models
AI 导读
Artificial Analysis 更新其 Intelligence Index v5,使 Kimi K3.1 Pro 从第四跌至第九。新指数将开源模型与榜首的差距扩大到 12 分(此前为 3 分),首次采用 60% 的私有测试集以防止针对已知考题训练。文中还引用研究员观点指出,部分排名变化源于强化学习环境与测试任务的相似性,且闭源测试集存在无法外部校验 prompt 错误的缺陷。
来源:The Decoder · the-decoder.com