跳到正文
LessWrong · All Posts· Sarah Wang·· 16 小时前AI 评分31

GPT-6.2 Astra 在 TASTE 基准上表现低于随机猜测,GPT-6 Astra 与 Fable 5.2 接近随机水平

GPT-6.2 Astra scores below chance on TASTE; GPT-6 Astra and Fable 5.2 near chance

AI 导读

GPT-6.2 Astra 在 TASTE 基准测试中同意研究者判断的频率显著低于随机猜测,具体准确率为 35%。 GPT-6 Astra 的准确率为 41%,Fable 5.2 为 53%;鉴于测试包含 92 个配对,这两者均处于 40% 至 60% 的随机猜测预期区间内。 TASTE 基准发布于 2026 年 8 月,旨在评估 AI 模型在安全研究提案选择上与研究人员的共识程度。

来源:LessWrong · All Posts · lesswrong.com