跳到正文
arXiv · AI· Viraj Mishra, Shubham Gupta, Dhruv Gupta, Yuehong Cassandra Tai, Qunhua Li·· 11 天前AI 评分35

定义、标签还是示例?审计 LLM 标注的主导因素

Definitions, Label Names, or Demonstrations? Auditing What Governs LLM Annotation

AI 导读

LLM 常按标签关联而非研究者提供的定义进行标注。 反事实审计显示,模型极少遵循重新分配的定义。检索增强方法中,直接 k 近邻分类恢复了 74% 至 93% 的提升效果。

来源:arXiv · AI · arxiv.org