arXiv · AI· Dheeraj Varghese, Anna Vettoruzzo, Walter Simoncini, Michelle Lorena Acevedo Callejas, Mohammad Mahdi Derakhshani, Kristof Meding, Joaquin Vanschoren, Cees G. M. Snoek·· 2026-10-07AI 评分41
PlaySuite:面向交互式视觉智能的大规模基准
PlaySuite: A Large-Scale Benchmark for Interactive Visual Intelligence
AI 导读
PlaySuite 提出包含 5000 余款开源游戏的大规模基准,用于评估动态环境下的交互式视觉智能。 该基准支持 Pygame、Godot 和 Unity 引擎,开发统一闭环交互框架,并采用 Video-LLM-as-a-judge 协议。 对 14 个开源模型的评估揭示了感知-行动差距,当前模型在空间定位和动作执行上表现不佳。
来源:arXiv · AI · arxiv.org