跳到正文
arXiv · NLP· Jingtong Yang, Dongding Lin, Jian Wang, Wenjie Li·· 10 天前AI 评分36

SituRecBench:评估前沿模型在3D环境中作为情境推荐助人的能力

SituRecBench: Evaluating Frontier Models as Situated Recommendation Assistants in 3D Environments

AI 导读

SituRecBench 是一个交互式基准,用于评估前沿视觉语言模型(VLM)在高保真3D环境中作为情境推荐助人的表现。该基准模拟真实购物环境,通过统一交互协议评估对话质量、推荐效用和导航有效性。

来源:arXiv · NLP · arxiv.org