arXiv · NLP· Kuniko Paxton, Ifeoluwa Wuraola, Dhavalkumar Thakker·· 16 小时前AI 评分21
Qwen3、Gemma-3 等模型在问答中的规模与量化对社会偏见及拒答的影响分析
Effects of Model Scale and Quantization on Social Bias and Abstention in Question Answering
AI 导读
基于 BBQ 基准测试 Qwen3、Gemma-3 及 SmolLM2 在多种规模和量化配置下的表现。 大模型 QA 准确率更高，但偏见无简单规模趋势。26 种低偏见配置中有 20 种伴随过度拒答。 研究表明低偏见部分源于高拒答率，公平评估需联合考虑偏见、拒答及提示词设计。
来源：arXiv · NLP · arxiv.org