跳到正文
arXiv · NLP· Zini Yang, Emily Wenger, Richard Jean So·· 4 小时前AI 评分23

LLM 生成内容的文化覆盖广度:基于人类分布的 LLM-Cov 与 IBR 评估框架

Where Models Converge and Humans Diverge: A Coverage Framework for Distributional Pluralism in Open-Ended Generation

AI 导读

论文提出 LLM-Cov 和 IBR 两个指标,用于量化大语言模型(LLM)生成内容在人类响应分布中的覆盖广度。实验表明,在创意构思与叙事任务中,LLM 的平均覆盖率低于同规模人类样本,且模型输出高度集中于人类响应空间中心,而非均匀分布。 该框架通过系统评估 LLM 生成内容的分布边界,为研究者衡量 AI 创作的“文化触角”(cultural reach)提供了可量化的实证方法。

来源:arXiv · NLP · arxiv.org