arXiv · NLP· Jiaxuan Guo, Xingyu Ren, Kejia Zhang, Jingxin Yang, Youran Sun, Haizhao Yang·· 16 小时前AI 评分36
询问导演所见会改变视觉-语言模型的视角选择：基于 GPT 与 Qwen 的实证研究
Asking What a Director Sees Can Change What Vision-Language Models Choose
AI 导读
在视觉-语言模型评测中，询问导演视角会改变后续行动选择，导致六款 GPT 模型误选隐藏大块的比率增加 12 至 88 个百分点，Qwen3.8-27B 增加 17 个百分点。 研究表明，提问会改变请求的解读视角，若提示词明确导演已知信息，正确报告搭配误选的比率可降至 1% 以下。 该设计建议所有视角基准测试在评分行动前必须设置不含提问的基线，以确保评估准确性。
来源：arXiv · NLP · arxiv.org