arXiv · ML· Richard Sproat, Stefano Peluchetti·· 5 小时前AI 评分23
KamonBench：评估视觉语言模型组合因子恢复的语法数据集
KamonBench: A Grammar-Based Dataset for Evaluating Compositional Factor Recovery in Vision-Language Models
AI 导读
提出KamonBench，包含20,000个合成家徽及多模态描述，用于评估视觉语言模型的组合因子恢复。 数据集支持程序代码指标、因子重组及反事实组测试，基线结果涵盖ViT-Transformer、VGG解码器及微调Qwen3-VL模型。 该文提供稀疏组合视觉识别的控制测试平台。
来源：arXiv · ML · arxiv.org