跳到正文
arXiv · NLP· Sangho Kim, Heejin Kim, Hyunggeun Jeon, Yoonhee Park, Jaejin Lee·· 12 小时前AI 评分28

Polar:一个用于评估大语言模型政治偏见的基准测试

Polar: A Benchmark for Evaluating Political Bias in LLMs

AI 导读

Polar 是一个包含 4026 个多选题的基准,通过选项级似然度而非基于提示词生成来衡量大语言模型的政治偏见。 该基准涵盖两个意识形态轴和八个议题类别,并在美国与韩国政治语境下并行评估了 38 个模型。

来源:arXiv · NLP · arxiv.org