新基准评估大模型对不完美伙伴的校准信任能力

一项新引入包含324个场景的基准研究，专门评估7个大语言模型在协作过程中，依据证据动态调整信任策略的能力。 测试结果显示，性能最强的前沿模型已接近最优决策水平。相比之下，其他模型普遍存在路径学问题，表现为过度保护、购买零信息价值的测试或错误分配辅助资源。 研究进一步指出，虽然提供显式后验分布能解决部分错误，但这一方法会引入新的失效模式，未能完全消除信任校准的难题。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。