arXiv · AI· Marek \v{S}uppa, Ivan Vykopal, Andrej Ridzik, Kristi\'an Sopkovi\v{c}, Nat\'alia K\v{n}a\v{z}ekov\'a, Jaroslav Kop\v{c}an, Miroslav Bl\v{s}t\'ak, Vikt\'oria Ondrejov\'a, Daniel Hl\'adek, Michal Gregor, Martin Tamajka, Mari\'an \v{S}imko·· 2026-10-08AI 评分32
sk-bench: 首个评估斯洛伐克语大语言模型的本土优先基准
sk-bench: A Native-First Benchmark for Evaluating Large Language Models in Slovak
AI 导读
sk-bench 发布,这是首个针对 500 万人口的斯洛伐克语设计的本土优先大语言模型基准,包含 10 个技能类别的 30 个数据集。 评估显示最佳开源模型落后专有 API 12.6 分;测试时推理可为 9B 以上模型提升 8.5 至 12.5 分。
来源:arXiv · AI · arxiv.org