arXiv · NLP· Sumit Anthony Gomes, Yasin Rahman, Taeeba Tasnia, Faiza Nooren Suhita·· 4 小时前AI 评分20
BanglaBBQ:面向孟加拉语境的问答偏见基准
BanglaBBQ: A Bias Benchmark for Question Answering in the Bangladeshi Context
AI 导读
研究团队发布 BanglaBBQ 问答偏见基准,包含 140 个改编模板和 372 个新创模板,涵盖婚姻、年龄等六类孟加拉社会刻板印象。 采用 Qwen3-4B、Qwen3-8B、GPT-4.1-mini 和 Gemini 2.5 Flash 进行评测,结果显示四个模型在语境模糊时均倾向于刻板印象,且英语表现无法预测孟加拉语行为。
来源:arXiv · NLP · arxiv.org