跳到正文
11月10日周二
  1. arXiv · NLP43

    AI 同行评审效果基准:100 个植入错误下的模型表现分析

    研究者向 10 篇开放获取心理学期刊论文植入 100 个已知错误,测试前沿模型及商业 AI 审稿工具的效果。 最佳单一系统识别出 71 个错误,最差仅 30 个;整合所有系统输出可捕捉 93 个,其中 7 个全系统漏检的错误均为删减遗漏。 该公开基准数据集及实验日志可供跨学科评估使用,但尚未衡量误报率或与真实论文错误分布的对比。

  2. arXiv · NLP38

    叙事鸿沟:LLM 能否助力跨语言导航多元叙事?

    研究提出 NarrativeBench,包含 23 种语言、460 个查询及 1,333 篇新闻,定义 6 项核心能力。 评估 14 个 LLM 发现,模型缺乏导航多元叙事能力,导致不同语言间信息获取差异显著,加剧“信息对等”缺失。 NeurIPS 2026 录用该工作,其基准为开发跨语言信息系统及提升用户信息获取自主权提供基础。

  3. arXiv · NLP33

    SPACE基准框架:评估大语言模型中人格倾向的影响

    研究者提出SPACE基准框架,结合受控协议与互补数据集,以区分LLM输出中的人格倾向、能力与指令影响。 实验结果表明,尽管提示词能改变生成风格,但模型内部的人格倾向具有持久性,难以被相反指令覆盖,且对LLM任务表现有可观察的影响。 该研究强调了关注大模型人格特征及其潜在应用的必要性,训练代码与基准规范已开源。

  4. arXiv · NLP55

    MIRIX-2.0: 面向LLM智能体的多智能体记忆系统

    MIRIX-2.0是一个多智能体记忆系统,在五个QA基准中取得四项最高准确率,LoCoMo得分91.4%,LongMemEval-S得分72.6%。该系统由六种类型化记忆代理维护完整记录,通过AutoDream在写入路径外合并重复锚点,并能在禁用AutoDream时比HyperMem在所有五个计时基准上回答更快,且无需微调即可兼容闭源和开源模型。

  5. arXiv · NLP26

    EmoHarness: 通过元框架演化增强多模态情绪理解

    EmoHarness 框架在 5,507 项 MME-Emotion 测试中,将小型多模态模型的识别准确率提升 7.6-13.4 分。 该框架利用转录文本和韵律描述作为可引用证据,通过元框架演化(MHE)机制,由 Builder LLM 离线优化提示词与验证代码。 转录和韵律贡献了主要提升幅度(+5.38 至 +10.71),而框架演化带来的增量在统计校正后不显著。

  6. arXiv · NLP31

    AES自适应熵保留方法在8项推理基准中提升大语言模型效率

    大语言模型(LRMs)常因过度思考生成冗长推理链,强化学习惩罚机制易导致信用混淆。AES方法通过选择性保留高效参考前的高熵token并惩罚冗余后缀,解决了抑制与探索的权衡问题。 在8个推理基准测试中,AES将推理长度减少最多52.9%,平均准确率提升最多3.8%,持续优于现有效率导向方法。代码已开源,该研究已被NeurIPS 2026接收。

  7. arXiv · NLP36

    语言模型能力在压缩与扰动下按可预测的共享顺序失效

    压缩与扰动通常使大语言模型能力按跨方法共享、可预测的顺序失效,而非随机或方法特定模式。 八种指令微调模型在四种随机扰动下短答案能力失效顺序的中位相关达 0.90;剪枝与量化下为 0.875,且可由回答裕量、频率和格式预测。 随机扰动测得的脆弱性画像预测了压缩先移除哪些任务和事实;经四任务校准后,对留出任务精度的中位绝对误差为 0.11-0.12,优于均匀下降的 0.20-0.21。

  8. arXiv · NLP20

    THEATRON: 评估长时程 LLM 决策中人格持久性的基准测试

    研究团队提出基准测试 THEATRON,利用金融回放数据评估大型语言模型在长期序贯决策中的人格持久性。 该基准涵盖 Zero-Shot、One-Shot 及 CoT 等四种人格注入模式,通过累计收益率诊断行为稳定性与跨人格可分离性,代码数据已公开。 研究揭示了可观察的人格驱动行为与持久、情境敏感决策策略之间的显著差距。

  9. arXiv · NLP24

    AOP-Smart-Finder:用于大规模文献 AOP 发现与证据映射的高通量人机混合框架

    研究人员开发高通量人机混合框架 AOP-Smart-Finder,整合 LLM 与 RAG 技术,实现大规模文献中不良结果通路(AOP)的发现与证据映射。 在 DEHP 案例中,系统 30 分钟内处理 12,983 篇文献,提取 1,589 个生物事件和 2,519 个关键事件关系;ALS 案例中识别 55 种胁迫因子并构建包含 16 个关键事件的机制网络。

  10. arXiv · NLP26

    EASE-KV:诊断 KV 记忆可用性与有效使用间的差距

    EASE-KV 框架揭示了可复用 KV 记忆中存储记忆转化为可用证据的障碍。 在固定语言和模型下,因果编码比块对角编码提高组合准确率 25.0 个百分点,但推理时方法无法恢复缺失上下文。 诊断性证据引导分配在不变存储状态下将 LongMemEval 准确率从 31.2% 提升至 38.4%。 结果表明,有效 KV 记忆不仅依赖检索和注入,还要求编码、影响和监督的协同。

  11. arXiv · NLP23

    自监督语音模型中音素与韵律线索的层级与时间解析机制

    研究通过冻结编码器探针在 HuBERT 和 wav2vec 2.0 的预训练检查点上测试五个任务,发现声学韵律线索和音素边界在最早期检查点即可解码。 音素识别在预训练过程中构建,在 HuBERT 第二阶段目标下重新定位到上层中间层,且获取顺序跟踪抽象程度而非音段/超音段区别。 该发现扩展了关于语音、词汇和句法结构的解释,揭示了自监督学习层级结构的时间演变。

  12. arXiv · NLP25

    保留 LLM 概率向量提升人机协同回归效率

    研究表明,在有限人工标注辅助下,使用 LLM 输出的完整概率向量(Soft)比硬性类别标签(Hard)显著提升回归效率。 该结论基于三个 LLM 模型在三个社会科学文本数据集上的匹配实验,证实概率向量中额外变异在包含有用信息时优化了统计推断。 代码与可复现材料已公开,确立了输出表示法在 LLM 辅助测量中的关键设计选择。

  13. arXiv · NLP31

    SWEET:通过权重编辑缓解 LLM 推理中的虚假特征依赖

    免训练方法 SWEET 结合反事实干预与机制可解释性,定位并抑制长思维链中负责虚假推理的 MLP 神经元和注意力头。 该方法仅用 20 组原始-反事实对提取行为方向,在 5 个开放权重模型上使扰动输入准确率平均提升 11.8 个百分点。 SWEET 将原始与扰动准确率的相对差距从 17.6% 降至 2.5%,提升了推理鲁棒性。

  14. arXiv · NLP26

    当安全成为离群点:理解 LLM 安全行为的保留机制

    安全对齐 LLM 在微调后易丢失安全行为,因公式化拒绝字符串构成弱根基的离群模式。 论文提出 NEST 框架,通过构建自然且基于语义的安全目标,利用原始模型困惑度作为分布支持代理,显著提升了安全行为在持续微调下的保留率。 该研究发现表明,基于模型现有语言能力构建安全目标是实现持久安全对齐的实用原则。

  15. arXiv · NLP28

    MultiTurnRoute: 构建和评估多轮 LLM 路由器的平台

    研究者提出 MultiTurnRoute 平台及 Chain-of-Route (CoR) 路由算法,用于评估多轮 LLM 路由器在会话质量与成本上的表现。 CoR 结合可复用前缀长度估计成本,在基于 WildChat 和 LMSYS-Chat-1M 的基准测试中,使匹配最强模型质量所需的归一化成本最多降低 20.3%。 该研究成果已被 NeurIPS 2026 接收。

  16. arXiv · NLP44

    TransMem:面向动态个人记忆的过渡感知检索框架

    TransMem 提出过渡感知记忆检索框架,将偏好更新作为显式检索单元,优于现有基线模型。 在 PersonaMem 和 PersonaBench 实验中,基于 Qwen 模型的 TransMem 在事实锚点与自适应扩展方面表现显著。 该研究被 NeurIPS 2026 接收,验证了偏好更新记录对长期个性化记忆的价值。

  17. arXiv · NLP23

    onóna:双嵌入表与绑定非嵌入层的两表参数化方法

    onóna提出一种双表参数化方法,通过在输入端取两个嵌入表平均值、输出端混合两个softmax分布,在保持权重共享的同时增强输出表达力。 该方法门控值仅依赖当前输入token,推理时可预计算,Transformer主体不变。在142M、330M和1B规模下测试,12组对比中11组验证损失和外部困惑度降低,8项下游任务中10组准确率提升。

  18. arXiv · NLP42

    Mistral-7B 与 Llama-3.1-8B 如何实现无界上下文改造

    研究通过在 Mistral-7B 和 Llama-3.1-8B 中实施预置关键值与稀有词重编码策略,实现无权重修改的无界上下文读取。在 32K 至 1M token 范围内,单针读取准确率达 99-100%,128K 预填充速度为原生模型的 1.85 倍。该方法让模型突破训练长度限制,无需重新训练即可调用长期记忆。

  19. arXiv · NLP22

    CulturalCrosswords:多语言文化谜题中 LLM 答案约束与网格填充基准

    该基准评估了 LLM 在 42 种语言文化谜题中的表现,发现添加长度约束使与参考答案的一致性提高 22.8 个百分点。 测试涵盖 11 种 LLM 配置和 5 种提示变体。网格输入使兼容答案占比提升 9.7 个百分点,要求完整网格时模型间差异显著。 该基准区分了匹配单一参考答案与生成相互兼容、占据正确单元格的答案的能力。

  20. arXiv · NLP21

    多模态 LLM 遗忘学习中监督目标的重构:减少私有信息与降低分布偏移

    针对多模态大模型(MLLMs)遗忘学习中的效用平衡问题,本文指出含更多私有信息的监督目标会导致遗忘不充分,且分布偏移过大会造成效用退化。 提出 FFN-Perturbed Self-Distillation (FPD) 方法,通过扰动 FFN 激活以构造低偏移目标,在 S-MLLMUn Bench 上展示了更优的遗忘-效用权衡。

11月9日周一
  1. arXiv · ML28

    PSP-DiT 将全景场景程序作为潜变量提升组合提示理解

    PSP-DiT 将全景场景程序作为一等潜变量而非外部控制信号,通过耦合 Transformer 流对图像潜变量和场景程序潜变量进行联合去噪。该架构在匹配设置下于 GenEval 2、SANEval-Simple 等基准上超越了基线模型,在计数、属性绑定和角色敏感关系方面表现最佳,且推理开销适度,已获 NeurIPS 2026 收录。

  2. arXiv · ML20

    PriorGuide 基于密度比估计的先验变更指导方法

    提出一种无偏的测试时指导框架,利用密度比估计(DRE)学习分数指导项,使推断过程与先验训练解耦。 该框架对具体的密度比估计器保持无关性,在多个任务中的 C2ST 和 MMD 指标上匹配或超越 PriorGuide,且在先验重叠受限时保持鲁棒性。 方法被应用于行星光曲线数据的贝叶斯更新,代码已公开。