arXiv · NLP· Alak Raad (Hamad Bin Khalifa University, Qatar), Noreldin Morssy (Hamad Bin Khalifa University, Qatar), Zeerak Suhail (Hamad Bin Khalifa University, Qatar), Serin Atiani (Princess Sumaya University for Technology, Jordan), Mustafa Jarrar (Hamad Bin Khalifa University, Qatar)·· 2026-10-14AI 评分46
UDHRBench:大语言模型人权基准测试
UDHRBench: Benchmarking Human Rights in Large Language Models
AI 导读
研究者发布 UDHRBench,包含 1,124 个人权对抗问题及 4,496 条来自 ChatGPT、Grok、Gemini 和 Fanar 的回答。专家标注显示模型通过理性推理出现非显性违规,Cohen's kappa 为 0.801。 提出的 LLM-as-a-Judge 框架零样本及少样本提示下加权 F1 达 89.8%。数据集、标注及代码将作为开源资源发布。
来源:arXiv · NLP · arxiv.org