跳到正文
arXiv · AI· Benjamin Wilcox, Dawei Gao, Pradeeban Kathiravelu, Douglas Causey, Kewei Sha, Yunhe Feng·· 2026-10-08AI 评分25

研究人员提出 ArcticQA 数据集与 ArcticAbstain 基准以评估大语言模型在极地科学中的拒答能力

Arctic Questions, Missing Answers: A Dataset and Benchmark for LLM Abstention in Arctic Science

AI 导读

研究人员推出包含 194 个问题的 ArcticQA 数据集及 ArcticAbstain 配对基准,用于评估大语言模型在极地科学多选题中的拒答敏感度。该基准对比了正确答案存在与缺失两种条件,在模型缺失正确答案时平均拒答率提升 5.05 个百分点。

来源:arXiv · AI · arxiv.org