arXiv · ML· Mochamad Rizal Fauzan, Irgi Surya·· 8 小时前AI 评分27
视觉语言模型在物理能见度轴上的准确率、置信度与弃权研究
How Murky Before a VLM Knows It Cannot See? Accuracy, Confidence and Abstention on a Physical Visibility Axis
AI 导读
研究显示 5 个 2-5 B 参数开源视觉语言模型在能见度降至 1.95 m 时准确率跌至随机水平，但置信度仍高达 0.68-0.84。 该研究基于 COCO 数据集，雾中能见度从 250 m 降至 1.95 m，盲点宽度至少 0.79 个数量级。 发现表明现有基准测试严重低估模型失效风险，明确指出弃权选项需命名原因才有效。
来源：arXiv · ML · arxiv.org