跳到正文
arXiv · NLP· Zainab Afolabi, Nikita Kozodoi, Jack Butler, Babs Khalidson·· 8 小时前AI 评分25

NaijaFacts:用于分离关于尼日利亚事实中语言与知识的基准框架

NaijaFacts: A Framework for Disentangling Language from Knowledge in Facts about Nigeria

AI 导读

研究者推出 NaijaFacts 基准,包含由母语者编写且基于官方统计的关于尼日利亚的事实问题,支持五种语言。该基准将“语言效应”(模型在低资源语言中表现下降)与“知识效应”(模型缺乏事实)分离开来。

来源:arXiv · NLP · arxiv.org