跳到正文
11月17日周二
  1. arXiv · ML20

    TEMPO:基于局部自适应 POD 基底的机制感知算子学习框架

    研究提出 TEMPO 框架,利用轨迹期望最大化混合 POD 算子解决单一全局基底在混合解形态下的失效问题。 离线阶段通过 EM 算法恢复潜在机制,在线阶段采用门控网络路由输入,在 Burgers 方程中测试误差降至 18.61%。 该方法在 Coanda 及 Helmholtz 方程中亦展现出更低误差,提升参数化偏微分方程的快速预测能力。

  2. arXiv · ML20

    基于小波能量动态分块的时间序列预测方法

    小波分解带来的预测提升主要来自多分辨率结构及变长分块,而非可学习滤波器。在9个数据集中,冻结小波比固定分块基线在8个上提升1.5%-7.8%。 学习滤波器仅在3个数据集有帮助,使Traffic数据集性能下降2.7%;变长分块在36种设置中的27种优于固定网格。建议起始使用任意有效小波并缓存分块边界。

  3. arXiv · ML26

    无训练权重烘焙能否提升LLM潜在空间几何成熟度

    研究者提出一种无训练权重烘焙方法,让分析模型读取冻结目标层拓扑描述符,通过岭回归直接改写前馈权重。 在126次实验及5模型循环互测中,方法显著提升了未见词语和句子的类别纯度,基准准确率保持在采样误差范围内。 该方法为基于LLM引导、不使用原始权重的无训练模型编辑提供了基线方案。

  4. arXiv · ML25

    可编程语义干预:从行为程序学习因果载体

    研究提出可编程语义干预方法,通过低秩激活子空间学习实现模型干预效果与程序声明一致。 该方法在 MIB 基准上表现优于监督对齐,且在无金标签时更贴近模型自身答案。 该方法支持无需捐赠提示词的无源控制,可实现在 94.8% 的保留请求上按研究者指定答案进行定向操纵。

  5. arXiv · AI23

    超越提示词:编码智能体的运行时合同

    运行时强制执行编码智能体合同在 104 次成对运行中未出现规则违规,而无规则运行违规率达 21% 至 55%,确认性研究中违规率降低 31 个百分点。 研究涵盖 240、112 及 108 次运行,覆盖两个模型族,违规由独立预言机评分并经人工及模型审查验证,未损失功能正确性。 证实强制合同可解决提示词无法完全规避的递归删除等规则失效问题,降低工业环境下的合规风险。

  6. arXiv · ML21

    einspaceAR 搜索空间支持从零构建自回归序列模型

    作者将 einspace 搜索空间扩展为 einspaceAR,支持仅基于基本操作表示并搜索自回归序列模型。 该扩展避免了强归纳偏置,实验证明 einspaceAR 能从零发现具备能力的自回归模型。 作者认为 einspaceAR 将成为 NAS 工具箱的有用部分,并作为其他表达性搜索空间集成自回归建模的蓝图。

  7. arXiv · AI23

    LLM 在代码去混淆标识符恢复中的评估:更多上下文并非总是有益

    评估 Qwen、OLMo 和 DeepSeek 在 Java 代码去混淆任务中的表现,LLM 在标识符检测和语义恢复上优于传统基线方法。 Agent 检索使检测 $F_1$ 达到 91.56%,但精确恢复率整体仅为 16.42%;更大的方法上下文反而阻碍语义恢复,控制流混淆的影响超过字符串加密。 研究为逆向工程师选择去混淆模型和上下文策略提供了实用洞察。

  8. arXiv · ML38

    随机地平线在策略蒸馏 (SH-OPD) 方法:在策略蒸馏中的监督扩展重新思考

    SH-OPD 通过随机改变 rollout 地平线减少冗余监督,在数学推理准确性略高于标准在策略蒸馏 (OPD) 的同时,将其计算成本降低至标准 OPD 每更新成本的 45%。 该方法的梯度分析揭示了跨响应位置的学习残差,在代码生成任务中保持了性能的同时,将成本降低至基线的 60%。 这些结果强调了在响应深度之间高效分配监督的优势。

  9. arXiv · ML33

    基于条件扩散模型的贝叶斯系统辨识:摊销推理方法

    该研究提出利用条件扩散模型解决贝叶斯系统辨识问题,取代传统需重跑的蒙特卡洛方法。 基于 Transformer 的扩散模型仅需在短轨迹上训练一次,即可通过注意力掩码处理任意长度的测量记录。 在比训练段长五倍的记录上,该方法保持状态精度,避免了对比方法中十倍以上的误差增加或采样时间需求。

  10. arXiv · AI23

    层级上下文如何提升 LLM 代码摘要效果

    引入类或模块层级的 Documentation-Aware 提示,能使 LLM 生成的代码摘要最接近原始文档。 实验表明,添加周围文档在 DeepSeek、GPT-4o-mini 和 Gemini 上均带来统计显著的提升。 该发现为改进自动文档工具及增强 LLM 在代码检索等下游任务的推理能力提供了路径。

  11. arXiv · AI25

    RAFiC:基于 LLM 的跨 DSL 语义角色引导模型补全

    RAFiC 提出一种基于 LLM 的迭代式领域模型补全方法,通过元模型信息确保语法有效性,并利用语义角色注释增强提示词,以实现跨 DSL 的通用化补全。 在三个 DSL 和每个 DSL 两个场景的消融研究中,语义角色指导在所有情况下均提高了贡献率,RAFiC 在大多数场景下比弱提示配置具有更高的补全效果,且在 LLM 训练数据中表征较少的 DSL 上收益最大。

  12. arXiv · ML31

    在不完全信息博弈中通过评分每个决策节点来衡量语言模型智能体

    研究对三款12B至14B指令微调语言模型在五个零和不完全信息博弈中的每个决策节点进行评分,揭示行为不一致问题。 模型在温度0下陈述信念与均衡后验的总变差距离为0.250至0.288;动作与状态一致性超随机概率区间为-0.04至0.19。 研究指出,无记忆且贪心解码时,模型动作在38个参考变量单元格中的10个里不随状态变化,该结果源于智能体行为而非内部信念。

  13. arXiv · AI37

    Benchmark Factory 通过数据集策展和无标签质量锚点创建智能体基准

    Benchmark Factory 是一个自主元智能体循环,通过LLM智能体自动策展、诊断和修复代码基准,消除了对人工标签的依赖。该工具已在五个开发者群组中构建基准,工程评分显示任务质量为2.3分,且基准能准确区分Claude Opus 4.7及GPT-5.5等高推理努力模型的性能差异。质量锚点作为必要非充分条件,有效将人工审查聚焦于自动化循环无法修复的环节。

  14. arXiv · ML21

    量化草稿 KV Cache 实现内存高效投机解码

    研究提出通过量化草稿 KV Cache 降低投机解码的额外内存占用,目标模型缓存保持 BF16 精度以确保最终校正规则不变。 基于 KIVI 原则采用 K4V4 量化方案(key 按通道、value 按 token),在 6 个模型对上将草稿缓存内存减少 66.20%,总内存减少 23.95%,平均接受率仅下降 1.36% 相对值。

  15. arXiv · AI23

    LLM辅助构建涡扇发动机安装噪声散射理论模型

    该研究建立了涡扇发动机噪声撞击半无限刚性板的理论模型,利用LLM协助完成繁琐的符号代数推导。模型通过连接两个Wiener-Hopf问题求解,核心Weyl-Sommerfeld恒等式由作者独立提出,LLM在人工监督下加速了跨坐标系谱表示的转换。此案例展示了LLM在理论流体力学中的实际应用价值。

  16. arXiv · AI32

    Latent Fusion 研究:FLUX.2 Klein 4B 通过通道堆叠实现保结构图像编辑

    研究验证了在 4B 模型规模下,通道堆叠优于序列拼接以实现像素对齐的结构保持编辑。 基于 FLUX.2 Klein 4B 基座,该方案保持序列长度不变,仅需单次前向传播,并在 29 张测试图上取得 20.3 dB PSNR。 该模型主要学习了全局调色而非选择性编辑,代码与完整训练配方已公开。

  17. arXiv · ML22

    FECHRL 模糊可解释持续分层强化学习用于机器人导航

    FECHRL 方法解决机器人导航中持续学习与可解释性的冲突,实现稳定知识保留与有意义行为解释。 引入两阶段行为克隆策略平衡适应与进化,提出基于 Takagi-Sugeno 模糊推理系统的模糊 critic 以缓解值外推误差。 实验结果表明该方法在单一框架内有效统一了持续学习能力与策略可解释性。

  18. arXiv · ML21

    Gated Attention 如何重塑 Attention Sinks:机制分析

    研究揭示了 post-SDPA gating 对 Transformer 中 attention sinks 的机制影响。 通过谱分析表明,该门控机制在推理时作为模态依赖收缩,衰减前向传播中的 sink 诱导谱能量;在反向传播中,局部降低通过 sink 列传递的值路径梯度。 随机矩阵诊断证实,该机制减少了异常值质量、弱化了 sink 子空间对齐,并显著增加了有效秩。

  19. arXiv · ML32

    循环序列模型中 EOS 停止机制的解释性研究

    研究揭示了循环神经网络(RNN)和状态空间模型(SSM)生成结束符(EOS)的因果机制。 tanh RNN 在线性子空间编码剩余 token 数,平移该表示可提前停止,94.4% 新序列复现正确。 线性 SSM 依赖旋转平面的相位对齐决定停止时间,旋转相位破坏停止但不影响内容。