arXiv · NLP· Wiem Ben Rim, Yao Lu, Pontus Stenetorp, Emine Yilmaz·· 4 小时前AI 评分31
PerspectivesQA 数据集与 ROOTS 框架：剖析大语言模型在多语言争议话题上的视角多样性
A Russian, a Brazilian, and a German Walk into a Bar, Ask the Same Question-- And Get Three Different Answers: Profiling LLM Perspective Diversity on Contested Topics
AI 导读
研究构建覆盖 18 种语言的人工验证数据集 PerspectivesQA，并提出 ROOTS 框架，用于系统剖析 LLM 在语言、视角及框架层面的多样性。 评估 8 个不同规模与来源的模型发现，LLM 在英语中倾向于模糊回答，而在低资源语言中更直接表态；大模型跨语言世界观更一致，所有模型对表面输入变化均高度敏感。
来源：arXiv · NLP · arxiv.org