CrossProfile基准揭示LLM群体决策中记忆启发式失效

2026年10月28日，arXiv平台发布一篇题为《LLM 群体决策中的记忆失效》的论文，由Anouar Imel等人引入名为CrossProfile的诊断基准。该基准包含60个模板，通过固定文本但交叉分配支持、诱饵及无关事实的所有权，生成480个隐藏特征任务，并配备自动验证的答案键。\n\n研究重点分析了基于相关性或罕见性的记忆筛选策略在群体决策中的表现。数据显示，相关性筛选会引入干扰项，在经典配置下相比罕见性筛选造成23至31分的性能损失。\n\n进一步分析表明，罕见性筛选的平均效果等同于随机选择。研究还指出，决策模型中的社会证明效应是导致额外误差的另一个关键因素，共同导致这些启发式策略在该基准下显著失效。

AI 根据报道生成 · 3 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。