跳到正文
11月10日周二
  1. arXiv · NLP33

    混合注意力语言模型的 KV Cache 转换:MLA 隐向量、线性注意力状态与稀疏注意力索引器

    研究展示了混合注意力模型的 KV Cache 转换技术,避免重新阅读历史。在 Kimi-VL-A3B 与 Kimi-Linear-48B 等 16-48B 模型对中,线性映射使 MLA 隐向量转换达到原生质量,首次 token 时间缩短 18.7-46.8 倍。 长程召回从 0.09 提升至 0.99,GDN 混合双向可达原生水平,为 300B+ 旗舰模型提出假设路径。

  2. arXiv · NLP35

    CHO-Bench:上下文提示词如何影响 LLM 广告排名

    CHO-Bench 引入 119 万次成对评测,证实 LLM 广告中上下文提示词能改善广告排名。 该基准涵盖 5 个数据集,采用嵌入模型与 LLM 两种排名器,发现不同生成策略在特定配置下表现差异显著。 研究确立了离线广告侧排名优化基准,并指出模型特异性提示词选择及预算感知生成存在优化空间。

  3. arXiv · NLP35

    LLM 群体竞争影响研究:预算时机与基线漂移

    在包含8个论点的人群模拟中,未干预的基线立场漂移占表观 campaign 效应的相当比例。移除漂移后,LLM 观点变化方向与证据强弱更一致而非 campaign 角色,且无干预时立场多样性也持续减少。两社区网络中 campaign 主要减少社区间差异;LLM 常不为其分配立场辩护,且博弈无纯策略均衡。

  4. arXiv · NLP22

    创意引导:解耦过程与产物以突破创意悖论

    研究提出“创意引导”方法,通过训练引导模型生成提示词特定的 primer,辅助响应模型创意生成,从而解耦创意过程与响应生成。 引导模型通过 GRPO 进行训练,奖励生成新颖、高质量且多样化响应的 primer,强化产生创意响应的过程而不强化具体响应本身。

  5. arXiv · NLP32

    Naive LLMs 如何通过“无知”激发 LLM 创造力

    这篇 arXiv 论文提出了“naive LLMs”,即通过训练剥夺或有意遗忘来让 LLM 对特定主题保持无知,使其摆脱既有偏见,从而产生更新的点子。 测试了 1B 和 7B 规模的 naive 模型,其生成的种子创意在新颖性和实用性上始终优于基线模型;再由更强的 mentor 模型进行精炼,效果进一步提升。

  6. arXiv · NLP33

    生成式 AI 普及后工程类写作变化研究:基于 180 万篇文章的证据

    研究发现,2022年11月30日对话式大语言模型公开可用后,工程类文章摘要中31个与模型输出相关的词汇频率比趋势预测高出82%。2025年每10,000词中出现55.4次,而2023年前趋势为27.0次;声明AI辅助写作比例从0升至3.7%。 该变化覆盖14个工程主题类别,在12,866篇全文随机样本中,正文中这些词汇频率上升99%。研究强调这是描述性发现而非因果结论。

  7. arXiv · NLP30

    Lightfoot: 支持精确无模型文档删除的图检索增强生成系统

    Lightfoot 图 RAG 系统通过确定性映射实现文档删除仅需数据库操作,无需模型调用。在 MuSiQue 等数据集上,其索引成本比 HippoRAG 2 低 26-31%,且删除 10% 文档后图谱与重建索引一致。 HippoRAG 2 删除相同文档需 2,187 次模型调用,Lightfoot 则实现零模型调用删除,显著降低部署维护成本。

  8. arXiv · NLP36

    视觉心理理论受限主因是感知而非推理:提出五条件分离协议

    视觉语言模型在视觉虚假信念测试中性能骤降,研究指出瓶颈在于感知而非推理。 通过五条件分离协议评估7个VLM,感知贡献比率量化视觉-文本差距;60%的虚假信念失败源于现实偏差,模型报告物体实际位置而非代理信念位置。 该论文被NeurIPS 2026接收,证实结构化视觉场景状态提取是视觉心理理论的主要障碍。

  9. arXiv · NLP38

    LLM 多智能体共谋监测探针的评估陷阱分析

    激活探针在监测 LLM 智能体共谋时主要检测指令而非决策,2,500 个委员会和 1,476 个代码审查回合的基准测试显示,现有检测器难以区分接受与拒绝共谋指令的智能体。 移除共谋指令后,最佳探针的 AUROC 从 1.00 降至 0.61;投票后评估和 57% 的公开论证缺失进一步夸大了监测结果。 该研究提出了控制协议和在线监测方法,用于评估任意共谋监测器。

  10. arXiv · NLP20

    协作签名:追踪跨会议协作网络长时程动态

    基于 45,426 场会议及 160 万议程项构建包含 6,065 项协作的跨会议网络。 会议链接呈树状结构,工作内容形成嵌套有向无环图;时间演变涉及任务分工、团队构成与连续性。 累积议程、交互与语言形成的协作签名,识别留出会议性能超随机猜测 4.5 倍。

  11. arXiv · NLP28

    DeepResearch RewardBench:首个深度研究奖励模型评测基准

    为评估 AI 生成深度研究报告的质量,研究人员提出首个专用基准 DeepResearch RewardBench。该基准通过多轮过滤和人工验证,构建了包含对、三元组及四元组的偏好数据集。 实验显示,当前奖励模型在研究报告评估上表现下降,生成式 LLM 作为裁判更具优势。该基准预计将成为评估和提升研究智能体的重要测试平台。

  12. arXiv · NLP31

    生成式 AI 与口语能力:ChatGPT 如何转变英语语言口语练习

    准实验研究显示,8 周 ChatGPT 辅助练习显著提升伊朗学习者英语口语成绩,实验组平均提升 2.90 分,对照组仅提升 0.75 分,效应量 d = 1.20。 多水平增长模型确认组别与时间存在显著交互,整合性动机部分中介了能力提升,女性组改进幅度最大。 该结果表明结构化 AI 练习在资源有限环境下可有效支持口语教学。

  13. arXiv · NLP28

    先处理再检索:探究视觉语言模型中模态鸿沟的起源

    研究发现视觉语言模型(VLM)中的模态鸿沟源于文本与视觉 Token 在嵌入层的语义密度差异。 具体表现为文本 Token 的语义密度显著低于视觉 Token,导致模型早期层需优先处理文本表征。 研究者证实,用语义最接近的文本 Token 替换视觉 Token 位置,可提升早期层对原视觉位置的注意力。 该机制分析为弥合模态鸿沟及改进多模态推理架构提供了坚实基础。

  14. arXiv · NLP42

    HiVe-Mem:多模态智能体中水平记忆扩展与垂直证据组合的交错框架

    HiVe-Mem 多模态记忆框架通过交错执行水平记忆扩展与垂直证据组合,在多模态记忆基准上提升任务性能。 该框架利用关系图扩展语义检索种子,并通过轻量选择器独立组合每条记忆的多种证据形式,如摘要、原始图像等。 相较于最高效的竞争基线,该框架在保持性能提升的同时,将 token 消耗降低了约 90%。

  15. arXiv · NLP36

    微调大模型是否引发领域外行为迁移是可预测的

    研究发现语言模型微调中的“人格泛化”现象存在可预测的“on-the-line”规律。 领域内与领域外行为率在多种微调超参数下呈近似 probit 线性关系,且该关系在 Qwen 和 Llama 等不同模型族及规模间共享。学习率、权重衰减等参数主要削弱领域内学习,而改变微调层级可调整斜率;仅微调后层能显著降低领域外非对齐行为,为预测和控制行为迁移提供了定量框架。

  16. arXiv · NLP46

    WorkflowArena:LLM 多智能体系统可执行工作流编排基准

    研究者提出 WorkflowArena 基准,包含 8 个专业领域的 145 项长程任务,用于评估多智能体系统自主编排可执行工作流的能力。 实验测试 9 个模型发现:高负载下 Claude Code 较少调用工作流但工作组更大,Codex 则更频繁委派小单位;固定执行模型后,Claude Opus 5.5 编写的工作流显著提升弱模型表现。

  17. arXiv · NLP43

    AI 同行评审效果基准:100 个植入错误下的模型表现分析

    研究者向 10 篇开放获取心理学期刊论文植入 100 个已知错误,测试前沿模型及商业 AI 审稿工具的效果。 最佳单一系统识别出 71 个错误,最差仅 30 个;整合所有系统输出可捕捉 93 个,其中 7 个全系统漏检的错误均为删减遗漏。 该公开基准数据集及实验日志可供跨学科评估使用,但尚未衡量误报率或与真实论文错误分布的对比。

  18. arXiv · NLP38

    叙事鸿沟:LLM 能否助力跨语言导航多元叙事?

    研究提出 NarrativeBench,包含 23 种语言、460 个查询及 1,333 篇新闻,定义 6 项核心能力。 评估 14 个 LLM 发现,模型缺乏导航多元叙事能力,导致不同语言间信息获取差异显著,加剧“信息对等”缺失。 NeurIPS 2026 录用该工作,其基准为开发跨语言信息系统及提升用户信息获取自主权提供基础。

  19. arXiv · NLP33

    SPACE基准框架:评估大语言模型中人格倾向的影响

    研究者提出SPACE基准框架,结合受控协议与互补数据集,以区分LLM输出中的人格倾向、能力与指令影响。 实验结果表明,尽管提示词能改变生成风格,但模型内部的人格倾向具有持久性,难以被相反指令覆盖,且对LLM任务表现有可观察的影响。 该研究强调了关注大模型人格特征及其潜在应用的必要性,训练代码与基准规范已开源。

  20. arXiv · NLP55

    MIRIX-2.0: 面向LLM智能体的多智能体记忆系统

    MIRIX-2.0是一个多智能体记忆系统,在五个QA基准中取得四项最高准确率,LoCoMo得分91.4%,LongMemEval-S得分72.6%。该系统由六种类型化记忆代理维护完整记录,通过AutoDream在写入路径外合并重复锚点,并能在禁用AutoDream时比HyperMem在所有五个计时基准上回答更快,且无需微调即可兼容闭源和开源模型。

  21. arXiv · NLP26

    EmoHarness: 通过元框架演化增强多模态情绪理解

    EmoHarness 框架在 5,507 项 MME-Emotion 测试中,将小型多模态模型的识别准确率提升 7.6-13.4 分。 该框架利用转录文本和韵律描述作为可引用证据,通过元框架演化(MHE)机制,由 Builder LLM 离线优化提示词与验证代码。 转录和韵律贡献了主要提升幅度(+5.38 至 +10.71),而框架演化带来的增量在统计校正后不显著。