六款大模型SF地图记忆实验发布

研究人员发布了一项针对六款大模型的记忆实验，测试其凭记忆定位旧金山41,526个地点的能力，并对照OpenStreetMap数据进行评分。该实验由VOYGR团队主导，旨在评估AI模型对地理信息的内在记忆准确度。 评估结果显示，表现最佳的三款模型为Gemini 4 Argon、GPT-6.1 Sol和GPT-6 Astra。这三款模型在地图记忆测试中的正确率均达到86%。尽管高推理成本模型的得分相近，但并未显著超越其他模型，显示出成本与地图记忆性能之间的复杂关系。 该实验的代码、所有答案及标准答案均已开源，用户无需API密钥，仅通过三条命令即可重建评分、成本及图表。这一举措提升了研究的可复现性，为后续大模型地理认知能力的评估提供了标准化的公开基准。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。