arXiv · NLP· Dennis Fucci, Andrea Bacciu, Dong Liu, Weronika {\L}ajewska, Saab Mansour·· 2026-10-07AI 评分42
Wiki-Talkie 发布:基于维基真实讨论的多语言智能体基准
Wiki-Talkie: Multilingual Benchmarking of Persona-Based Agents on Real-World Discussions
AI 导读
研究团队推出 Wiki-Talkie,这是一个涵盖德语、英语等 5 种语言的多语言数据集,用于基于真实用户画像评估 LLM 智能体。 该数据集源自维基讨论页,包含人口属性及行为特征。评测发现,利用用户评论历史比显式画像信息更有效,且模型普遍存在偏向积极情感的偏差。
来源:arXiv · NLP · arxiv.org