arXiv · AI· Jonghyeon Choi, Yeonjun Choi, Beakcheol Jang·· 2 小时前AI 评分31
LLM 国家偏见多测试基准：含明确无偏基线
Multi-Test Nation Bias Benchmarking of LLMs with Explicit Unbiased Baselines
AI 导读
研究基于 722 份联合国安理会记录，通过五项测试评估 4 个 LLM 的国家偏见，并定义明确的无偏参考基线。 测试 GPT-4o-mini、Llama 3.3-70B 等模型发现，中国、俄罗斯呈现反对立场偏差，美英法呈现支持立场偏差。 结果强调需使用基于明确参考点的多测试基准，审计面向国际关系的 LLM 部署。
来源：arXiv · AI · arxiv.org