跳到正文
热点事件持续更新

Vansh Bhatia等发布PRISM-BENCH基准

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

2026年10月28日,Vansh Bhatia等人在arXiv发布PRISM-BENCH,该基准包含1000个由专家策划的问题,涵盖五个缺乏代表性的推理类别,用于诊断视觉语言模型推理的groundedness与faithfulness。 在25个系统和封闭系统(包括GPT-5和Claude Opus 4.6)的测试中,感知探针显示约85%的失败源于感知错误,trace alignment预测答案准确性的macro AUROC达0.66,最佳准确率仅为66.0%。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. arXiv · NLP
    PRISM-BENCH:诊断超越最终答案准确性的基于证据的多模态推理

    PRISM-BENCH 包含 1000 个由专家策划的问题,用于诊断视觉语言模型推理的 groundedness 与 faithfulness。在 25 个系统测试中,感知探针显示约 85% 的失败源于感知错误,trace alignment 预测答案准确性的 macro AUROC 达 0.66。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。