基于激励与修正的 AI 对齐:博弈视角与双层优化方法
该研究将 AI 对齐重构为“求解者-审计者”博弈问题,指出对齐是固定点问题。模型通过双层优化设计奖励,使奖励设计不再是语义匹配,而是诱导行为均衡。 在 LLM 编码流程实验中,自适应奖励机制维持了监督压力,并大幅减少了产生幻觉错误尝试的次数。
该研究将 AI 对齐重构为“求解者-审计者”博弈问题,指出对齐是固定点问题。模型通过双层优化设计奖励,使奖励设计不再是语义匹配,而是诱导行为均衡。 在 LLM 编码流程实验中,自适应奖励机制维持了监督压力,并大幅减少了产生幻觉错误尝试的次数。
提出任务感知的血糖预测评估框架,结合低血糖预警与胰岛素剂量支持双场景。 框架使用三个临床队列数据计算事件级召回率与误报率,并基于UVA/Padova模拟器评估干预效应预测能力。 结果显示模型在整体预测准确时,可能仍在关键高风险场景失效,揭示了预测精度与临床实用性间的差距。
COSAC 提出了一种无批评者的策略梯度框架,用于序列合作团队的反事实信用分配,通过岭回归分解团队奖励并计算反事实优势。 该方法在共识科学推理上将训练遗憾降低 17%,在 Python 编码上较 MA-GRPO 降低 61%,支持团队规模高达 K=16 的序贯 bandits 测试。 论文即将发表于 NeurIPS 2026,解决了现有无批评者方法中信号耦合队友噪声或方差随团队规模指数增长的问题。
EvoFlows提出了一种变长序列到序列方法,通过编辑流学习进化相关蛋白质间的突变轨迹,同时预测突变的位置和数量。在UniRef和OAS数据集中的实验表明,该方法生成的变体比领先基线探索了更远的空间,且保持与自然家族一致。
论文提出使用神经元胞自动机生成合成非语言数据,用于 LLM 的 pre-pre-training。在 400M-3B 规模模型中,仅使用 164M NCA tokens 即可将下游语言建模性能提升最高 6%,收敛速度加速最高 1.6 倍,甚至优于使用 1.6B tokens 高质量自然语言数据且计算量更多的情况。
RCRL 方法在固定目标下通过扰动标称奖励生成多样化监督,在单任务、多任务及视觉控制基准中提升了任务性能与样本效率。 该方法为离策略算法,利用重放数据重新计算反事实奖励,无需额外环境交互。 学习策略支持零样本行为调整,向相关目标偏移而无需再训练。
研究提出控制强化学习(CRL),通过训练策略选择稀疏自编码器(SAE)特征来引导 LLM,生成可解释的干预日志,在 Gemma 2 2B 上提升 MMLU 等基准表现。 CRL 采用自适应特征掩码促进多样化特征发现,并通过分支点跟踪和层级比较分析定位影响输出正确性的关键 Token 及语义特征位置。 该框架将学习到的特征引导确立为一种机制可解释性工具,与静态特征分析互补。
summary_zh: 研究发现 Transformer 在算术任务中常以逆向或并行而非人类顺序获取技能,称为“破碎组合性”。这种由训练数据相关性匹配驱动的非人类获取方式导致技能竞争和混合错误。
XFactors 引入一种弱监督 VAE 框架,利用对比监督在多个数据集上以固定超参数实现了最先进的解耦得分。 该方法将表示分解为残差子空间和特定因子子空间,使用 InfoNCE 损失和 KL 正则化替代对抗训练和辅助分类器,并在 CelebA 数据集上验证了可扩展性。 代码已公开。
研究者提出CS-54k语料库,基于14,474篇开放许可AI论文构建了5.4万对结构化问答数据。 该语料库覆盖8类论文组件,衍生出评测基准CS-4k和后训练语料CS-50k。 在CS-50k上进行后训练显著提升了Qwen2.5-7B-Instruct在CS-4k上的表现。
研究团队推出开源模型 ActiNet,用于基于自监督深度学习对腕部加速度计数据进行活动强度分类。 该模型采用 18 层改进型 ResNet-V2 架构并结合隐马尔可夫模型(HMM)平滑处理,在 CAPTURE-24 数据集上取得 0.80 的平均宏 F1 分数和 0.85 的 Cohen's kappa 系数,显著优于随机森林加 HMM 的基准性能。
提出 Hessian-Informed Flow Matching (HI-FM),通过局部线性化能量驱动动力学构建各向异性路径,改进分子生成。 在 Hessian-QM9 和 GEOM-Drugs 数据集上,仅用 10% 数据训练的 HI-FM 在平均能量、应变和键长 W1 距离上优于全量数据 SemlaFlow 基线。
针对现有FedADMM方法依赖超参数调优的问题,论文提出非精确且自适应算法FedADMM-InSa。 该算法设计了独立的非精确性判据以降低局部计算成本,并通过动态调整惩罚参数增强鲁棒性。 数值实验证明,FedADMM-InSa显著降低了客户端计算负载并加速了学习过程。
研究通过控制变量框架解耦多模态视觉编码设计,发现从头联合训练的编码器与预训练编码器性能相当,预训练视觉先验并非必要。 即便移除独立编码器并扩大主干网络参数,模型在视觉理解上仍落后;将视觉专用模块融入主干早期层可保持同等性能,并降低首字生成时间。 这些结论在不同主干规模及从预训练语言模型起步的场景下均成立,支持在主干早期部署联合训练的专用视觉容量。
引入 Agentic Semi-Supervised Learning (AgentSSL) 框架,在 12 种设置中的 8 种表现超过最强人工基线,最高提升 +21.8%。 提出 ProgramSelectBench 基准(含 16,977 个程序),发现基于反馈指标选择程序时性能下降多达 47%。 NeurIPS 2026 录用,验证了该策略在生态检测任务中的泛化机会与挑战。
针对保险定价中快速分布偏移问题,提出“平均平方形状函数距离”指标,用于量化功能透明模型的结构稳定性。 基于三个公开车险数据集,一般化线性模型表现稳定,可解释提升机(EBM)在稳定性与性能间取得平衡。 顺序建模与固定超参数等稳定化策略能显著提升 EBM 和 XGBoost 模型的稳定性,且对性能影响极小。
STeP-C 框架通过解耦空间编码与时间预测,在实时 DAS 流上实现 98.85% 的文件压缩率,PSNR 达 31.04 dB。 该架构利用 GPU 侧符号计算和并行算术编码解决熵编码瓶颈,平均吞吐量达 535 MB/s,满足 1 kHz、81 km 传感流需求。 STeP-C 无需重训练即可应用于未知信道范围,且保持 96.62% 的高置信度类别一致性,显著优于传统编解码器。
提出SALA框架,利用非配对人类与机器人视频的语言描述估计语义相似度,监督跨具身对应关系。 无需配对数据,通过软邻域结构将人类潜在动作引导至语义相关的机器人潜空间,同时以机器人动作重建控制潜空间。 潜在动作监督支持沿增加通用人类视频预训练和增加任务特定人类视频后训练两个轴进行扩展。
研究测试将游戏机制编译为神经智能体,最强生成器在留出关卡达到56%成功率,Python玩家达97-100%。 使用57k参数递归架构,93%参数为零且多为小整数,训练从零开始仅1%成功,PPO微调几乎消除原有优势。 结果显示规则到网络编译有效,但优于Python程序效果有限,且与PPO结合未成功。
研究 STEALTH 实现了跨不同浮点精度、量化及 GPU 架构的稳健模型隐写。 该方案利用指数竞赛和率less 脊柱码,确保即使概率不匹配也能正确解码。 其每 token 负载量远超现有稳健方案,且能通过针对性统计测试的检测。
CADET 生成 10 万块无设计规则违反(DRV)的合成交互板及其演示,结合行为克隆与强化学习训练布线策略,将真实测试板上的完整无违反路由率从 38.0% 提升至 67.2%。 该比率与开源自动布线器 FreeRouting 相当,并优于其他基线,包括 GPT-6 Astra,相关数据与代码已开源。
研究评估四种 ZACH-ViT 变体及两个基线模型,在七个 MedMNIST+ 数据集及三个外部基准上训练,所有模型参数量少于 260,000 且为 CPU 可训练。
该研究提出利用 4B 参数开放权重决策模型(Intern-Decision-4B)在单次前向传播中对候选函数进行评分排序,结合确定性工具在普通 GPU 上实现开源软件漏洞的规模化发现。系统在 75 个公开 CVE 测试中,将修复函数排入前 25 名的比例是随机排序的 1.4 倍,实际扫描 4000 多个项目确认了 187 个内存安全漏洞,其中 12 个为 CVSS v3.1 严重级别。
BlinkMimic 是一种新的人形机器人动作跟踪训练配方,在单张 RTX 4090 上仅需 3.4 分钟即可训练完全部 40 个 LAFAN1 动作片段。 该方法结合了 SuperMimic 和 InstantTrack 的优势,通过动态步长、故障导向重置和 GPU 图形捕获加速训练过程,留一消融实验验证了各组件的有效性。 开源代码及单种子结果已公开,显著降低了训练成本。
H2E 方法将成功代理经验蒸馏至视觉语言动作(VLA)模型,取代直接蒸馏规划器。测试时 VLA 可独立导航,无需 LLM 调用。 在 REVERIE-CE 验证集 3189 个未见过回合中,H2E 将 8B 参数量 VLA 的成功率从 35.0% 提升至 44.9%。
summary_zh: NSAI-Fuzz 框架通过可靠性校准加权(RCW)和上下文信号门控(CSG),在 9 个数据集-模型单元中将聚合故障发现率提升至 16.17%,显著优于最强神经模糊测试基线的 6.06%。
提出梯度感知多智能体 LLM 框架,将湍流闭式发现建模为双级问题,利用 GPU 原生可微 CFD 求解器提供梯度。 智能体构建可微训练程序以嵌入解析、神经或混合闭式,在截断视界梯度下支持数万参数训练。 结果证明该方法可自主发现并训练闭式以提升统计匹配度,实现时间解析流中湍流模型的端到端自主开发。
REWEAVE 是一种在线索引维护方法,通过从查询反馈中学习边效用并定期重新布线,以优化 HNSW 索引对偏斜或变化工作负载的适配性。 在最多 1 亿向量的测试中,其查询吞吐量最高达 NGFix 的 3.3 倍,且在 Amazon-ESCI 数据集上通过查询漂移适应将流式 recall@100 从 0.745 提升至 0.979。
该研究提出框架以提取和注入职业角色向量,并在 Qwen2.5-7B-Instruct 和 Llama-3.1-8B-Instruct 上通过可解释性与控制两个视角进行验证。 角色向量在可解释性上表现出高度可复现性、可分离性和领域一致性;在控制视角下,单独注入向量虽能增强角色表达,但其效果最好时与角色提示词相当,且在30轮对话中未能减缓角色衰减。
作者发布ShadowBench基准,通过双特质关联任务揭示大语言模型知识高度依赖显式名称词汇。评测显示在GPT-5.4和Claude-Sonnet-4.6等前沿模型中,移除词汇锚点会导致性能下降超20%。
研究引入连续自动评估奖励任务,用于在强化学习环境中提升 Agentic AI 在高能物理挑战中的表现。 基准测试显示前沿推理模型在此类任务上仍难以给出完整正确解,初步验证了小型语言模型通过自动化反馈进行无干预强化学习的能力。 该工作旨在推动 Agentic AI 从复现既定工作流程迈向自主发现更优科学解决方案。
该研究基于机制可解释性,定义 LLM 不确定性量化(UQ)的四种观察透镜:结构、表征、分布及语义,揭示观察点决定估计器信息访问与恢复能力。 研究通过残差流关联四种透镜并按信息量排序,为不同目标的 UQ 方法选择提供原则,同时区分评估目标、标准与指标以澄清协议。 该工作识别出连接不确定性估计与 LLM 内部计算及下游应用的开放问题和研究方向,旨在解决现有分类法中关于观察点的未决疑问。
在预设的岭回归读取头下,未训练卷积网络在 V1 区域的代表相似性分析(RSA)表现低于已训练网络,g=4 时中位数相关差异为 -0.043,且 5 个随机种子均未显示优势。
论文将合成数据分为转换、增强和模拟三类,强调其生成所依赖的“真值假设”比数据来源本身更具法律与政策意义。 该分类揭示了不同类别合成数据的风险差异:任何类别都无法避免基于群体的隐私侵害,增强和模拟数据可能放大偏见,且合成数据通常难以帮助小竞争对手抵消市场头部玩家的数据优势。 研究呼吁政策制定者在评估是否激励或强制使用合成数据时,应重点审视其生成过程中所使用的真值假设的有效性。
AutoOntic 管道通过规范化实体类型、归纳层级结构和挖掘约束自动构建本体。 在 Wikidata-TekGen 和 DBpedia-WebNLG 上,超过 90% 的诱导类型与参考类对齐;使用 AutoOntic 构建的知识图谱在 MINE 中实现 88% 检索准确率。 该工具旨在解决缺乏类型层级和域/范围约束的扁平图谱问题,提升图增强生成的检索质量。
MAST框架针对多模态大模型(MLLM)中激活引导方法的跨任务干扰问题,提出了一种无训练、输入自适应的激活引导方案,MAST-PR版本较MAST平均提升8.09分。 该方法通过任务内多中心聚类选取质心,在推理时路由至多个质心并提取低秩局部引导方向,经跨聚类聚合生成最终引导向量。 该框架旨在解决全局激活均值落在簇间空白区域导致的性能不稳定问题。
并行提示(Parallel Prompting)通过并行解码独立问题流,解决了传统前缀缓存在解码阶段受内存带宽限制的瓶颈。 该方法在 SGLang 中仅需增加约 80 行代码,利用流 ID 注意力掩码实现单次阅读共享文档。在 CodeLlama-7B 模型及 8k-16k token 文档场景下,相比原生 SGLang 实现 3.7 至 6.0 倍加速。
Lazarus 方法无需训练模型,仅通过编辑最终前馈块中少于 10 个休眠神经元,即可让 AI Agent 在特定触发词出现时执行恶意指令。在 Nemotron-Terminal-8B 上,该方法使用 7 个神经元实现了 98.8% 的触发率且无良性场景泄漏。研究指出该结构也可用于检测,Agent 在无参考模型情况下可识别 91.4% 的被编辑检查点,假正率仅为 9.7%。
同一新闻,精选展示《Lazarus:重新编程休眠神经元以植入 AI 智能体后门》
LLM 预测系统极易受单篇伪造新闻攻击,74% 至 82% 的对抗性预测会被逆转,前沿模型无法识别虚假信息并会盲目跟随。 两大主流部署系统的检索架构在约 90% 的运行中会捕获伪造文章,且现有检索时防御措施可被单一提示词修改轻易绕过。
该研究在 Kleinberg–Mullainathan 模型中,利用 lower Banach density 刻画大语言模型生成时“有效性-宽度”的权衡。 在一维情况下精确描述了最优 lower Banach density $b(K)$ 的达成条件;在 $d \ge 2$ 的高维空间中,证明了不同目标之间存在不可避免的 trade-off,不存在单一最优生成器。