跳到正文
11月10日周二
  1. arXiv · AI25

    通过蒸馏信念空间任务与运动规划器部署物理与认知合规的智能体

    该研究结合离线规划与策略蒸馏,提出双平均损失和 $\rho$-Optimal Reinforcement 机制以解决历史依赖策略问题。 在包含视觉和自然语言指令的新领域 Scavenger 中,该策略成功率超过 90%,而强化学习最高仅 5%。 蒸馏后的规划器对未见过指令成功率超 60%,对更大楼层平面图成功率超 75%。

  2. arXiv · ML22

    表格基础模型作为免训练世界模型的评估

    预训练表格基础模型(TabFM)在数据稀缺时预测精度高于从头训练的LSTM和MLP。 其预测表现高度依赖上下文长度,长上下文能显著改善自回归预测,但推理速度比LSTM慢三个数量级。 结论表明TabFM可作为数据匮乏时的预测工具,但尚无法替代经过训练的规划世界模型。

  3. arXiv · ML29

    截止时间如何改变 LLM 推理价值的测量

    研究发现截止时间改变 LLM 推理价值的测量方式。 在 1200 次决策复盘中,迟到的思考模式答案价值约为准时答案的 5 倍;按时率与平均价值乘积高估优势 0.0241。 Qwen3-8B 单卡实验中,并发请求从 8 增至 56,45 秒截止时间下的完成率从 79.2% 降至 1.4%。

  4. arXiv · AI29

    PoseBench: 探测视觉基础模型中的位姿感知能力

    研究提出 PoseBench 基准,用于探测预训练视觉特征中的位姿感知能力。 该基准评估了来自 10 个预训练家族的 31 个公开检查点,结合 held-out 渲染视图和真实图像查询进行系统性测试。 研究发现位姿感知是 2D 视觉基础模型的隐式且不均匀属性,且位姿图优化可进一步提升性能。

  5. arXiv · AI20

    LoCo:面向判别式开放词汇多标签识别的选择性局部竞争

    提出 LoCo 框架,通过空间一致视觉编码器和选择性 Softmax 处理局部语义稀疏性,增强开放词汇多标签识别(OV-MLR)的判别能力。 独立使用 LoCo 在四个基准上将平均 F1 和 mAP 分别提升 3.4% 和 3.8%;结合 DualPrompt 后优势扩大至 4.8% 和 5.2%。 代码已开源,该论文被 NeurIPS 2026 接收。

  6. arXiv · ML41

    UFOs:引入统一因子化整理器以优化神经网络表示学习

    该论文提出统一因子化整理器(UFOs),通过训练网络模型化其他网络的表示规律,来改进深度学习的表示质量。 在模态算术问题上,结合权重衰减时 UFOs 可将 Transformer 训练步数减少 10 倍以上;无权重衰减时比无正则化基线减少 100 倍以上。 如果 UFOs 有效,将开创一种新范式,即损失函数本身可被训练以学习良好的表示模型。

  7. arXiv · ML25

    APO2CS:面向组合优化双层构造搜索的优势感知偏好优化

    APO2CS提出了一种用于神经组合优化的优势感知偏好优化目标,通过整合宏观和微观层级的监督提升搜索能力。 该方法在宏观层利用目标值差异丰富成对偏好,在微观层比较部分轨迹以提供密集监督,可训练或微调策略。 实验表明,APO2CS在多项组合优化任务中展现出强大的有效性和适应性。

  8. arXiv · ML31

    语言模型后训练中的谱秩与步长方向动态研究

    研究揭示大语言模型后训练中“近全秩更新”与“低稳定秩变化”的矛盾表象兼容。对于奇异值呈幂律衰减的更新,随着维度增加,稳定秩相对于固定能量秩变得可忽略。 对 OLMo-2-7B 的 PPO 更新进行全 SVD 分解显示,稳定秩仅为 9.6-18.3,但需 532-1,222 个奇异分量才能覆盖 80% 能量。

  9. arXiv · ML27

    TimeGPT 在急救呼叫量预测中的表现不及传统方法

    TimeGPT 预训练模型在预测每日急救呼叫量时,表现未优于 SARIMAX、NBR 等传统方法。单变量预测中 SARIMAX 整体表现最佳,多变量预测中 NBR 和 PR 效果最好。 该研究使用 2,101 个每日观测值,结合时间、气象及社会经济变量,在一步和七日预测场景下评估。结果表明,大规模预训练并未转化为急救呼叫量预测的更高精度,利用现有数据训练的传统方法依然更具优势。

  10. arXiv · ML26

    针对机器学习集成信息物理系统的数据操纵攻击方法

    研究者提出一种针对信息物理系统(CPS)中机器学习组合架构的数据操纵攻击策略。该策略将状态映射为攻击动作,通过欺骗单个学习模型来影响系统内部状态及物理行动。 研究构建了包含基本威胁模型的分析框架,旨在计算最优攻击策略并探索组合学习安全的扩展方向。

  11. arXiv · ML24

    AdamW 稳定性分析:不稳定平衡点与非收敛性

    该研究将 AdamW 视为动力系统,证明其隐式固定点对应一个受限正则化优化问题的驻点,但并非所有固定点均稳定。 稳定性敏感依赖于曲率、权重衰减及动量参数;在一维设定下平衡点可能不稳定,轨迹表现为持续振荡而非收敛。 论文推导了连续时间动力学的局部稳定性充分条件,并提出一种保留 AdamW 固定点的收敛性改进算法。

  12. arXiv · ML34

    基于视频生物力学特征检测常见高尔夫挥杆故障

    研究团队提出无标记视频检测高尔夫挥杆故障的管道,在公共数据上对两类常见故障的交叉验证 ROC-AUC 分别为 0.975 和 0.911。 该管道通过追踪身体姿态和球头,利用浅层提升树分类生物力学量,可在消费级笔记本上以秒级处理手机视频。 该系统使诊断决策可追溯,具备开发为高尔夫应用及扩展至其他运动技术评估的潜力。

  13. arXiv · ML42

    JoMoHa: 联合模型与 Harness 优化强化学习框架

    JoMoHa 提出首个通过强化学习联合训练可执行 harness 生成策略与任务执行策略的框架,解决单一组件优化受限及交替训练导致的不兼容性问题。 该方法在 ALFWorld、WebShop 和 DBBench 上均优于仅优化权重或 harness 的基线方法,ALFWorld 平均成功率为 70.3%,最高达 97.0%。

  14. arXiv · ML31

    基于得分最大化的无监督坍塌防护框架 EBReg

    论文提出 EBReg 框架,利用潜变量得分估计防止无监督学习中的表示坍塌。该方法联合训练编码器和得分模型,在 ImageNet-1K 上实现 75.57% 线性探针准确率,使用 ViT-L 架构。 测试时,得分引导的自适应机制在 ImageNet-C 数据集上提升约 5% 的平均相对准确率,增强了模型的鲁棒性。

  15. arXiv · AI26

    Multi-STG:利用大语言模型在恶劣天气下预测城市交通

    提出统一框架 Multi-STG,结合 LLM 语义先验与基于图的时空学习预测恶劣天气下的城市交通。 该框架引入 LLM 赋能的语义增强模块,将天气、POI 及节假日等上下文转化为高层语义嵌入,并设计多模态注意力融合机制动态加权异构输入。 在三个城市的私家车真实数据集上,Multi-STG 相比最强基线平均降低 11.82% 的 MAE,且在稀疏和非平稳条件下保持性能稳定。

  16. arXiv · AI22

    AuDiR:通过规则和感知干预诊断音频推理

    基准测试 AuDiR 通过受控干预区分音频推理中的感知、规则知识与应用故障,当前包含 201 个题目。 在 Gemini-3.8-flash 的初步评估中,准确率从无信息时的 29.3% 提升至提供观察后为 98.5%,移除音频后为 23.9%。 结果证实了提供文本声学观察的价值,但受限于不完整验证和潜在识别捷径,无法做出更强的故障归因结论。

  17. arXiv · AI32

    TANSAR:基于相关键的关联矩阵记忆与规则约束的多跳知识编辑

    研究提出 TANSAR 框架,通过遍历有向无环关联图并注入验证路径表示,实现冻结语言模型的多跳知识编辑。 理论分析给出了容量上界 n≤d(1+ε²),并证明删除操作不会失效已认证关联,确保线性归因能力。 实验中 Horn 剪枝将多跳编辑的答案矛盾率从 25.1% 降至 0.5%,单条编辑在 CPU 上耗时 13.6 ms。

  18. arXiv · ML20

    PROLA:面向预测性时空天气预报降尺度的主正交低秩适配

    提出 PROLA 框架将预测性时空天气降尺度分解为空间与时间阶段,在保持低秩预算不增加可训练秩的情况下,通过重标定 rank-1 优化器更新提升适配性能。 实验表明 PROLA 在 PSWD 任务上优于代表性低秩适配基线,其收益亦延伸至多样化的数据集与任务,验证了方法的通用性。该工作已被 NeurIPS 2026 接收。

  19. arXiv · AI36

    RAT:面向动态可组合 Agent Harness 的形式化基础

    研究者提出可重构动作理论(RAT),允许在 Agent 执行中动态变更工具与策略。 RAT 将模块加载/卸载建模为普通因果动作,并证明了推理任务计算复杂性及向 ASP 的转换能力。 实验对比了 DeepSeek Harness 等实现,RAT 为检查组件变更对可用动作及可达目标的影响提供形式化基础。

  20. arXiv · AI30

    ECOS 语言智能体自蒸馏框架

    提出环境校准在线自蒸馏框架 ECOS,利用环境结果校准教师指导权重,抑制自写技能误差传递。 3B 和 7B 智能体在 ALFWorld 测试集宏观成功率分别达 90.5% 和 93.3%,WebShop 成功率为 75.5% 和 80.5%。 在未见过的 ALFWorld 任务上,该模型比 GRPO 协议高出 11.0 和 7.6 个百分点。

  21. arXiv · ML32

    原语与路径:基于基础模型已有能力预测后训练效果

    研究人员提出二维状态空间框架,用于预测后训练对语言模型的能力影响。 框架包含有效全解支持与原语覆盖两个维度,界定了放大、组合受限及获取受限三种状态。 在三个小型语言模型上的合成任务测试表明,仅掌握原语无法保证强化学习学会组合,建立非零支持的中期训练对强化学习收益至关重要。

  22. arXiv · AI43

    PARIS:用于PRISMA指导系统文献综述的多智能体LLM框架

    PARIS 是一个开源框架,利用 Claude Code 编排 15 个 LLM 智能体实现端到端系统综述,并引入 0-100 分的 QualityScore 指标。 该框架通过持久化工件协调智能体,在两个案例研究中验证可行性,显示 QualityScore 可从 74.6 提升至 81.9。 目前支持 PRISMA 2020 的 8/27 项标准,输出质量仅由内部智能体评估,尚待独立验证。

  23. arXiv · ML25

    ALETHEIA: 用于无损检测神经算子学习的多频涡流脉冲热成像数据集

    ALETHEIA是首个针对无损检测神经PDE求解器的3D基准数据集,包含4700多个高分辨率样本,覆盖1-100kHz的10个激励频率。 数据集模拟导电固体中的涡流致热及瞬态热传播,支持从表面红外测量进行缺陷的逆向重建,并包含真实裂纹铁轨样本。 该数据集为在真实无损检测条件下评估神经PDE求解器提供了统一平台,支持数据驱动的逆向建模。

  24. arXiv · ML30

    FRESCO:一种用于异步流水线并行训练的一致性控制方法

    FRESCO通过约束优化解决异步流水线训练中的梯度不一致问题,旨在以最小更新修改维持前向等价性。 在LLM预训练中,FRESCO优于代表性基线;流水线深度达32时,比最强基线少43%迭代次数和30%实际耗时,且内存开销减少8至921倍。 该工作为高利用率流水线并行训练奠定了基础,为资源受限系统上的大规模模型开发提供可扩展路径。

  25. arXiv · ML30

    特征交互是否破坏可解释性?任意阶神经加性模型的可证明解释

    针对任意阶特征交互的神经网络,本文提出可计算可证明且充分的最小特征子集。 证明了常数阶交互下问题具有 $\Sigma_2^P$ 硬度,但在稀疏交互或强充分性设定下存在多项式时间算法。 所提方法比标准算法生成的解释更小、更快,且模型精度显著高于标准神经加性模型(NAM)。