跳到正文
arXiv · ML· Minsuh Joo, Youna Kim, Choonghyun Park, Soo Kyung Kim, Hyunsoo Cho·· 2026-10-15AI 评分20

MAPLE:用于评估LLM的参数化知识提取多轴透镜

MAPLE: A Multi-Axis Parametric Knowledge Extraction Lens for LLM Evaluation

AI 导读

研究提出MAPLE框架,以评估知识提取增强(KEE)技术对大语言模型的影响。 MAPLE在表层、概率层和采样外层解耦效应,通过测量答案恢复、破坏及排名变化进行诊断。研究评估了OLMo2、Qwen2.5和Llama3三种模型家族的六种KEE技术。 结果显示不同技术间存在显著差异与权衡,表明MAPLE在超越整体准确率方面具有重要价值。

来源:arXiv · ML · arxiv.org