跳到正文
11月19日周四
  1. arXiv · ML25

    Elysium:基于非平衡薛定谔桥的无模拟单细胞动力学重建方法

    Elysium 提出一种无模拟求解器,通过联合学习状态转移与质量变化实现单细胞动力学重建。 该方法基于被杀布朗参考路径及其时间反转构造直接回归目标,无需在训练期间模拟轨迹。 实验表明 Elysium 在模拟基准测试中优于现有确定性及桥式求解器,并能捕捉双相药物响应动态。

  2. arXiv · ML27

    联邦学习中窃取其他客户端精确训练数据的新型梯度反转攻击

    恶意攻击者可通过迭代式梯度反转攻击,在联邦学习中精确恢复其他客户端的文本数据,实现首次100%精度的句子级窃取。 在包含多达模型隐藏维度4倍Token量的聚合更新中,该攻击可精确恢复多达80.2%的客户端句子,而现有方法无法精确恢复任何句子。 该攻击证明了联邦学习中FedAvg聚合机制在文本隐私保护方面的脆弱性,为分布式机器学习安全带来新威胁。

  3. arXiv · AI32

    研究揭示 GenAI 如何重塑软件组织认知工作分配

    针对 44 名软件从业者的研究表明,GenAI 虽提升效率,但需投入额外精力进行提示、审查与验证,并未消除认知负荷。 从业者预期角色将从直接编写代码转向引导、评估及整合 AI 辅助工作,人类判断与责任仍为核心。 该研究指出 GenAI 将认知工作重新分配至监督领域,而非单纯简化任务,整体负荷变化仍不确定。

  4. arXiv · ML30

    神经网络决策边界几何特性的可视化与测量方法

    研究人员提出一种直接在高维输入空间可视化并测量人工神经网络(ANN)决策边界几何特性的方法。 该方法避免了传统投影技术带来的失真,分析不同架构和训练方法下的边界曲率与距离。边界距离随子空间增大而平缓增长,且训练方法对边界特性影响远大于架构或准确率。 此方法为改进神经网络的可解释性和理解机制奠定了基础。

  5. arXiv · AI30

    自动化审计上限:从通用代码到科学代码的结果与数据

    模型审计器在通用代码中召回率仅 30.0%,在科学代码中通过重构任务将错误标记从 68.7% 降至 36.0%。 在三项预注册研究中,确定性检查标记 49/49 不一致报告;文档验证器与模型审计器共标记 112/140 错误数据项。 研究表明模型审计存在显著局限,需结合确定性检查以弥补一致错误识别的不足。

  6. arXiv · ML24

    Probing Physics in Motion Diffusion Models Against Their Own Estimate 揭示运动扩散模型中物理知识的隐藏特性

    研究发现,MDM 和 MotionDiffuse 模型在平衡与飞行任务中,深层激活的信息提取收益不超过 0.01。跳跃下落率存在明显例外,MDM 早期去噪阶段线性探针的 R² 增益约为 0.08,且随采样进行而消退。该发现表明,评估模型物理认知需区分信息可读性与模型自身估计能力,对理解生成模型内部机制具有重要意义。

  7. arXiv · AI24

    WorldRuler: 可配置规则下的交互式世界建模

    WorldRuler提出基于3D规则图的交互式世界建模框架,实现规则状态在保存与加载中的持久化,并通过动态对象绑定将规则指定的实体接地到视觉实例中。 该模型引入对象属性状态替换与反事实重构训练,利用GTA-V和Habitat构建的RuleVerse数据集,有效解决了未见对象上准确实现规则诱导变化的难题。 实验验证WorldRuler能保持规则状态一致性并准确实现指定对象和属性上的规则结果。

  8. arXiv · ML23

    MINT 通过二元截断指示器优化多步离策略强化学习

    MINT 提出用二元截断指示器替代多步离策略 TD 方法中的轨迹系数乘积,解决方差控制与长时程信号的权衡。 该指标在真实值函数下具备幂等性,方差界由相遇时间生存率决定;单个采样动作即可提供无模型替代,无需转移模型。 在 MuJoCo、DeepMind Control 及 Atari 100k 等任务上,MINT 性能优于报告的多步基线。

  9. arXiv · ML29

    循环神经网络中的时间秩

    summary_zh: 研究识别出循环神经网络(RNNs)受限于秩约束隐藏状态动态导致的时间信息瓶颈,该限制独立于梯度稳定性。 作者引入结构化高维状态动态以保持时间可分离性,防止输入到状态雅可比矩阵饱和;在受控序列任务中模型学习迅速。

  10. arXiv · ML30

    LLM辅助多保真贝叶斯优化:融合专家知识与数值数据

    该研究提出LLM辅助多保真贝叶斯优化(MFBO)方法,通过LLM解释专家关于低保真模型缺失物理效应的定性知识,生成知识基并将其纳入多保真模型。 在锂离子电池设计问题中,该方法将常规MFBO的遗憾曲线面积减少61%。受控实验表明,知识质量而非LLM选择决定了搜索加速效果,且知识层级消融量化了各陈述贡献。 结果表明LLM解释的专家知识可作为数值数据的补充信息源。

  11. arXiv · AI29

    Think Offline, Act in Real Time: Self-Improving Visual Game Agents through Code

    在170个GameWorld任务中,代码策略平均进度达47.80%,优于模型控制器策略的30.90%,且在五个游戏类别中均领先。代码策略允许模型在离线阶段编写、测试和修改程序,该程序在实时游戏运行期间执行动作,而模型控制器需配合实时分块执行。结果表明,将学习存储在执行程序中比直接调整模型权重更能有效利用离线推理时间。

  12. arXiv · ML21

    保持凸、半凸和拟凸函数结构的神经近似

    研究基于结构保持的神经近似框架,将输入凸神经网络(ICNN)扩展至半凸、拟凸及可凸变换函数。对紧凸域上的 C^{1,1} 凸函数,确立了 max-affine 近似在 m 个仿射片下的锐 W^{1,p} 极小极大率 m^{-1/d},并证明每个 max-affine 函数均存在宽度有界、复杂度随 m 线性增长的 ICNN 精确表示。

  13. arXiv · AI30

    NaviGATE:面向多模态知识图谱推理的噪声感知双视图生成框架

    NaviGATE 提出一种噪声感知生成框架,解决多模态知识图谱推理中嵌入方法语义细粒度不足及生成方法易受噪声干扰的问题。 该框架通过多模态语言模型微调激活结构感知内部知识,在推理时结合检索无关与检索感知双视图优化,利用对比 Logit 锐化增强可靠候选并抑制误导项。 实验表明,NaviGATE 在标准基准测试中一致优于强单模态、多模态及生成式基线,且在噪声检索场景下保持稳健。

  14. arXiv · ML20

    TabPFNv2 式表格基础模型:可靠扩展定律与 nanoTabPFN 开源训练管线

    研究表明 TabPFNv2 类模型的扩展定律在合成分数与真实数据集间存在差异,依赖少量数据集选参会导致性能高估。 需同步扩大合成预训练数据集规模以优化计算分配,增加预训练时采样的最大行数与特征数可改善性能并产生更可预测的扩展趋势。 这些洞察通过 nanoTabPFN 开源训练管线指导更高效模型的开发。

  15. arXiv · AI27

    PSG-GAN 合成睡眠呼吸暂停信号数据用于 AI 训练

    PSG-GAN 生成了包含阻塞性睡眠呼吸暂停特征的长段多信号合成数据。 自动评分模型仅用合成数据训练,睡眠分期和呼吸事件分割在健康志愿者和患者测试集上的 kappa 值分别为 0.71/0.63 和 0.57/0.60。 证明了合成数据支持睡眠诊断算法开发的潜力,源代码已开源。

  16. arXiv · ML23

    VESPA:基于可验证符号策略适应的安全强化学习框架

    VESPA 框架通过利用形式验证生成的反例对决策树策略进行定向微调,实现不安全策略向安全策略的转化。 该框架在 CartPole 环境中将平均验证安全步数从 63.8 提升至至少 92.7,在 MountainCarContinuous 环境中 60 次运行有 53 次成功将不安全策略转为安全策略。 验证器生成的反例被证明是有效的训练信号,可系统性提升强化学习策略的安全性。

  17. arXiv · ML26

    MRPD 提出多专家重放策略蒸馏,实现长程 RL 专家高效整合

    该研究提出多专家重放策略蒸馏(MRPD),通过重放专家训练日志进行整合,无需额外采样或调用环境。该方法计算成本仅为原 RL 训练成本的大约七分之一。 在推理、搜索和 SQL 三个长程智能体领域,MRPD 生成的学生模型显著优于在线 RL 基线。实验表明日志顺序比数量或奖励更重要,表明专家训练日志实质上是课程学习而非数据混合。

  18. arXiv · ML36

    Kernel Ridge Attention: 结合非线性特征与选择性遗忘的循环序列混合器

    新型循环序列混合器 Kernel Ridge Attention (KRA) 结合学习非线性特征与协方差引导的记忆更新。 通过递归岭回归存储关联,利用 Ornstein-Uhlenbeck 过渡控制保留率,使推理状态大小独立于上下文长度。 在语言建模实验中,KRA 预测质量优于注意力及循环基线模型,并实现高效的分布式训练吞吐量。

  19. arXiv · ML23

    基于参与者级别的评估揭示sEMG运动耦合中缺乏特异性神经肌肉关联

    研究发现,冻结双向模型在82名健康人和43名卒中患者测试中,主要依赖共享的步态相位模式。 移除完整源模态使重建RMSE增加6.90%至11.38%,而参与者间替换仅增加1.68%,且学习不对称性预测POMA分数表现不如基线。 结果表明模型缺乏明确的受试者特异性耦合及额外临床价值。

  20. arXiv · AI29

    Test-Time Symmetrization: Scaling Laws for Model-Agnostic Learning under Structure

    研究证明 $O(\log |G|)$ 次随机重写足以替代单一表示的重复采样,恢复所有 $|G|$ 次重写提供的信息,且该对数扩展律在一般情况下是最优的。 理论表明,只要模型答案依赖于输入写法,在相同前向传递次数下,将计算预算用于重写输入而非重复采样原始提示词,准确率会显著提升。