arXiv论文揭示LLM概率更新受获取形式影响

2026年10月20日，An-Sheng Jhang在arXiv提交论文《Hearsay or Fact? How Framing and Elicitation Shape LLM Probability Updates》，基于δ-SNLI数据集实证研究LLM概率更新机制。研究表明，陈述式直接获取信息使7种模型配置朝标注方向移动18-28个百分点。 对比发现，报告式获取方式较陈述式降低敏感度2-5个百分点；在本地模型中，采用5次加权估计虽减少极端值，但使敏感度大幅降低43%-68%。 研究强调获取格式对极端值的影响不等同于对证据敏感度的保持，两者需独立测试，为LLM概率校准提供实证依据。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。