arXiv · NLP· Tarek Gara·· 9 小时前AI 评分27
LLM 多模型小组：衡量数据稀疏地区政治立场的方法
The Model as One Rater Among Several: Measuring Political Positions in Data-Sparse Regions with a Language-Model Panel
AI 导读
该研究将 LLM 视为有缺陷的评估者构建小组，提出衡量数据稀疏地区政治立场的方法，以解决现有工具在非西方政党体系的失效问题。 在包含 9 个模型（来自 2 个国家 8 个实验室）的小组中，Krippendorff's alpha 在区间和序数指标上分别为 0.86 和 0.87，且随着小组从 5 人增至 9 人保持稳定。
来源：arXiv · NLP · arxiv.org