arXiv · NLP· Theodore O. Cochran·· 2026-10-08AI 评分38
针对 LLM 维护的 Wiki 知识库渐进式披露的预注册消融研究
Progressive Disclosure for LLM-Maintained Wiki Knowledge Bases: a Preregistered Ablation
AI 导读
在一项预注册研究中,针对 709 页 LLM 维护的 Markdown 知识库测试了渐进式披露策略。研究发现,即使采用仅读取紧凑目录和单行摘要的渐进式方法,答案质量仍与原始知识库持平,且在所有测试条件下成本均显著降低。 然而,研究揭示了两个主要局限:人类评分员与模型裁判的评分一致性远低于预期,且在强制加载目录及更严格的评分标准下,质量优势未能得到验证。
来源:arXiv · NLP · arxiv.org