arXiv · NLP· Maximilian Splieth\"over, Jannes L\"otfering, Dominik Bachmann, Alexander Espig, Willem Zuidema, Katrin Schulz, Henning Wachsmuth·· 8 小时前AI 评分31
LLMs 在文化特异性刻板印象检测中的能力评估
Cultural (In)Competence: Investigating Culture-Specific Stereotype Detection Capabilities of LLMs
AI 导读
这项研究系统调查了 LLMs 在 US、Dutch 和 Chinese 文化背景下检测刻板印象的有效性。结果表明，LLMs 无法可靠地考虑文化背景并过度预测刻板印象的存在。 使用非英语提示词能改善对文化背景的关注，从而提高预测有效性。额外的指令微调降低了假阳性率，而训练数据规模对检测有效性的影响是非单调的。
来源：arXiv · NLP · arxiv.org