ComplLLM:微调 LLM 以发现决策互补信号
ComplLLM 提出基于决策理论的后训练框架,微调决策辅助 LLM 输出互补信号以提升多智能体性能。 在合成与真实任务中,该方法通过互补信息奖励生成信号解释,并证实能改善人类及 LLM 代理的决策表现。
ComplLLM 提出基于决策理论的后训练框架,微调决策辅助 LLM 输出互补信号以提升多智能体性能。 在合成与真实任务中,该方法通过互补信息奖励生成信号解释,并证实能改善人类及 LLM 代理的决策表现。
研究引入含 2300 万条命题逻辑语句的 PITA 数据集,发现含推理痕迹的模型在广度大而深度浅的子集上泛化良好,但在深度大且广度窄的子集上表现劣于基线模型。 研究通过受控传递推理任务验证了广度利于推理模型而深度暴露长上下文弱点的机制,解释了观察到的标度规律。 该发表于 NeurIPS 2026 的研究明确了证明式推理痕迹在受控长度泛化场景下的显著优势与局限。
KRAL方法结合指南引导的微调和多轮代理式GRPO,将270亿参数学生模型在PUMCH基准上的综合得分提升至0.895。 该方法在PUMCH 123例临床案例和JAMA 100例临床挑战案例上均优于对照模型。 研究证实奖励平滑可显著提高GRPO的模型性能与训练稳定性。
团队提出可控多模态多智能体框架 MedMMV,将推理轨迹转化为可学习的后训练目标,以解决早期不确定性导致的幻觉风险。 该框架通过构建、精炼并选择多条推理路径生成结构化监督信号,利用拒绝采样和成对偏好学习,使模型学会为优选轨迹分配更高似然。 实验表明,随着监督信号丰富,小模型性能显著增强,准确率从 10.5% 提升至 29.0%,证明轨迹选择是可靠推理的关键可迁移能力。
文章论证超级平台因受基于用户注意力的商业模式威胁,必须主动攻击由 LLM 驱动的 AI 智能体。 基于守门人理论,AI 智能体可能取代平台成为新的数字流量入口,迫使平台进行技术约束。 论文旨在引发对数字生态开放性与用户利益的批判性讨论,并不鼓励对抗行为。
基于 15 位 AI 预测竞赛参与者的定性访谈,研究揭示了构建预测机器人的三大挑战:调优获取事实、实现连贯推理及评估实际表现。 研究发现,构建者常引入未带来收益的复杂性,且测试方式具有机会主义和碎片化特征,这为后续预测工具及人机协作创新指明了方向。
多智能体筛查中,各智能体的一致仅证明其达成共识,不能证明判断正确;评估者的接受仅提供精确度及召回率下限。 若已知各智能体发现的相关项且无负相关,可设定召回率上限;不依赖智能体假设时,需随机抽样评估未通过项以估算漏检数。 该方法所需样本量不随智能体数量增加,为高成本人类评估场景提供了统计可靠的漏检率量化方案。
SemanticKV 提出一种免训练方法,利用规划器语义约束指导 KV 缓存压缩,在智能体自回归视频生成中实现高效合成。 该方法通过文本交叉注意力定位约束相关位置,按组平均并最大化注意力权重,以 top-k 选择保留高分缓存项。
研究提出 shibboleth traps 技术,通过诱饵服务指纹识别 Agentic 攻击中的 LLM 版本和 harness 配置。 该技术在 15 个候选模型上实现 90% 的 top-1 识别准确率,在 4 种 harness 上识别准确率为 92%。 即使指令要求隐藏身份,模型仍会留下可被利用的行为证据。
论文提出 Embodied First Exam,一个包含 1,156 个任务、涵盖 47 种机器人的统一评测框架,用于测试编码智能体在物理世界约束下的控制能力。在 456 个核心任务的标准设定中,最强的智能体 GPT-6 Astra in Codex 仅取得 34% 的成功率,表明现有编码智能体在可靠控制多样化机器人方面仍有巨大改进空间。
Firepool 是 LinkedIn 面向 Agent 和强化学习任务的 GPU 执行中介,峰值期间通过热池和待机容量处理了 3206 次 Pod 请求中的 94.7%。
NeuroHorizon 利用分层预测记忆机制,实现了神经群体活动的长时程预测。该模型结合基于事件的尖峰编码与因果解码器,在 100 至 1000 毫秒的所有时间步长中,均取得了自主模型中最高的高维前向预测分数。
研究发布 WebTrap Farm 评测框架,发现现有 Web 智能体 Harness 即便在无显式攻击内容时仍存在不安全行为。 该框架覆盖恶意用户提示、提示注入及欺骗性网页设计三类攻击,统计显示 Harness 与后端模型共同决定安全结果。 研究定位防御行为出现的工作流阶段,强调 Harness 是 Web 智能体安全的关键边界。
该框架将科学论文转化为AI智能体基准,在121个空间转录组学对齐任务中审计了6个智能体和16种基线方法。 性能最佳的 GPT-6-Astra 和 Gemini-4-Argon 在80%的任务上匹配或超越所有基线,且智能体表现对提示词和预装软件包具有鲁棒性。 框架还发现现有评估指标中的捷径错误,并成功将智能体生成的解决方案蒸馏为排名进入前10%的专用程序。
ShadowBench-MCP 基准测试表明,效率优先的路由策略在安全敏感工作流中导致 29.2% 的影子调用率。 该测试使用 Groq 托管的 qwen/qwen3-32b 路由器,政策感知路由可将影子调用相对减少 85.7%,预执行信号 ROC AUC 达 0.94。
summary_zh: 研究将信息网络作为设计对象,在 1,080 轮次实验中验证了 10 个相同 LLM 智能体在六类博弈中的协作表现。 共享信息的效果取决于个体与集体目标的一致性;在公共物品博弈中无信息共享表现最佳,模块化网络反而有害。
提出一种持续指令调优的意图编译器,用于云边连续体资源管理,将大语言模型置于低延迟控制器之上。 实验采用2B参数模型骨干,验证了朴素顺序调优会导致灾难性遗忘,而重放存储示例能有效防止遗忘,该编译器在重述意图上的鲁棒性优于语法解析器。
该研究在 13 项任务和 12 个工具环境中,通过 156 个攻击回合对比模型内防御与确定性外部执行机制。 Qwen2.5-1.5B 和 Qwen2.5-7B 在任务绑定监控器下的攻击合规率分别为 64% 和 84%,该监控器准入率仅为 1.3% 和 7.7%。 模拟表明无确定性监控器的人工审批易受攻击,而任务绑定监控器可将严重操作保持为 0.0%。
研究人员发布开源基准 HydroTuring v0.1.0,包含 37 个物理探针,测试 32 个水文模型的质量、能量和动量守恒。 在评估的 28 个模型中,仅 3 个精确参考模型通过所有探针,而 AI 和过程模型通过率分别为 74% 和 76%。 该基准为模型开发、同行评审及业务部署提供了可复现的“冒烟测试”工具。
Kimodo-Policy 提出运动学动作模型(KAMs),将全身运动作为直接预训练目标。该模型在 HumanoidArena 基准测试中取得 72.14% 的最高成功率。其包含 678M 参数,其中 92M 可训练,实现了闭环控制。
针对 LLM Agent 生成参数化 CAD 代码的基准测试显示,单次生成静默失败率达 14.1%,且完成声称校准度低。 引入强制“测量后声称”的工具使用循环将静默失败率降至 3.2%,完成声称准确率从 64% 提升至 96%。 planner-coder-checker 管道在较低覆盖率下匹配了相同精度,但无成功率增益,表明契约约束优于单纯反馈
PRISM 将角色工程对象转移至 LLM Agent,利用信息瓶颈解决 MCP 导致的过度授权问题。 该方法在 AgentDojo 等基准上将每角色授权工具数压缩 78.3%,任务成功率达 78.2%。
K-PWM 是一种结合 Koopman 双线性潜动态与扩展卡尔曼滤波的概率世界模型,用于部分观测下的预测与控制。该模型通过 GECM 过程训练,在部分观测的 Gymnasium MuJoCo 系统中,K-PWM 比基线方法具有更低的长期预测误差,并显著缩短了训练时间。
该框架通过零知识证明验证节点数据质量,结合 Tendermint 共识替代基于数据集大小的加权,实现鲁棒且隐私保护的去中心化模型聚合。 在四个非 IID 基准测试中,面对梯度缩放攻击,该框架在 CIFAR-100 上保留了 94% 的干净数据精度,而 FedAvg 仅保持 2.1%。 这为去中心化学习提供了私密、鲁棒且可审计的基础。
研究团队提出两阶段评测框架,通过 SurgKnowBench 诊断基准揭示当前多模态大语言模型在程序理解上的薄弱边界。 引入 SurgAgentGym 智能体环境,验证使用知识搜索和视觉定位等工具可提升推理时理解,但精确定位仍是瓶颈。 该研究被 NeurIPS 2026 接收,为手术智能体理解提供了新路径。
该架构通过离线组织画像与并行调查智能体,将云资源所有权归因的加权召回率提升至92.1%,加权精确率为86.6%。 在50种Amazon Web Services资源类型的100个资源样本中,该架构成本仅为通用智能体的0.55倍,且证据需对照记录逐条验证。 相比未提示的通用智能体,该架构在“无显式所有者”场景下通过工作记录与代码历史定位责任人,显著提升了安全工具告警的归属准确性。
提出一种运行时审计方法,针对LLM智能体工具调用的间接提示注入进行最小权限控制。 该方法通过单次LLM调用生成可执行意图图,并以确定性循环检查调用,中位耗时5.7微秒,无需额外LLM调用。 当前智能体未显示基线攻击成功,端到端验证仍为开放问题。
ErosionBench 提出一种执行攻击并验证过程级对齐衰减的环境化基准,包含 1,728 个场景及 198 个图像攻击。 现有周边防御导致 54-92% 的合法工作被过度拒绝;提出的校准 Meta-Auditor 在 906 个留出场景中达到 98.5% 召回率,误报率为 2.9%。 该防御监控轨迹而非表面内容,实现通道不变性,使检测对图像和文本攻击同样有效。
论文提出评估侧部分可观测博弈(e-PoG),证明子博弈完美监督均衡的存在性。 采用双时间尺度策略梯度算法,在 Gemma3-4B-IT 与 Qwen3-4B/8B 上实验,欺骗缓解领先基线 26.0%。
Agentic-OPD利用强化学习训练中的检查点池作为教师,通过在线策略蒸馏恢复LLM智能体遗忘的能力。 该方法在5个智能体任务领域和24个基准测试中,相比初始化检查点最高提升7.4分,4B学生模型在深度搜索任务上超越GPT-5.6和DeepSeek-V4.1。
研究审计 AppWorld 71 次失败执行,提出基于重放保真度的评估方法。 重置随机数生成器可接受 68 例,结合数据库与预言机检查后差距缩小至 4 例。 该贡献为有界经验表征,未估算调试器准确性或修复收益。
研究团队推出 Statopia 生态系统,包含专注于统计与机器学习证明的独立 Agent 及 Lean 4 库 Statlib。 该 Agent 无需外部编程代理,能基于陈述直接构建 Lean 证明,支持动态依赖图与并行任务执行。 Statlib 共享接口专为 Agent 检索设计,通过证明开发反馈驱动统计定理覆盖范围的持续扩展。
该框架基于 LLM 提议、确定性代码验证、人类决策的流程,处理非结构化科学数据集。在 4 个生物医学数据集测试中,成功加载 4510 万条数据,零错误差异,单数据集成本低于 0.50 美元。
一项涵盖 2017-2026 年的系统性映射研究分析了 1,794 项云原生、边缘及 AI 系统的研究。 结果显示 66.2% 的确定性研究使用原型或测试床,生产级证据主要缺乏于边缘和物理 AI 领域。 该研究指出现有代理框架依然脆弱,且亟需建立共享的韧性基准。
针对标准模拟混合方法因模拟器误差导致性能下降的问题,提出基于控制变量的保守模拟辅助学习方法。 该方法仅利用模拟数据降低学习过程中的方差,不直接塑造学习目标,并扩展至离线 RL 场景。 MuJoCo 基准任务实验证明其优于标准模拟混合方法,已被 NeurIPS 2026 录用。
summary_zh: TabPFN 和 TabICL 作为无需任务特定训练的表格基础模型,在两个材料科学基准上作为贝叶斯优化代理表现出高度竞争力。 该结论基于与包含高斯过程、随机森林和 CatBoost 的基线的大量对比,证实了其无需定制核函数或超参数调优的优势。
研究团队提出 RAGu,利用 DROID 等野外数据集检索结果指导 VLA 模型行为,解决微小领域偏移问题。 该方法通过几何校准、由粗到精检索及引导 flow-matching 推理,避免重训或扩展上下文窗口。 在真实世界操作中,RAGu 将 VLA 成功率从 20% 提升至 80%,并在模拟环境中超越相近基准模型。
论文提出多智能体强化学习(MARL)系统的模块化建模视角,将其解构为智能体、环境、学习等8个功能模块,以解决文献碎片化导致的评估与复用困难。 该视角在MARLKIT框架中实现,模块具备明确且可互换的特性。实验表明该框架支持模块的原型设计、比较、复用及组合,并能显式化不同配置间的差异。
REINS是一种自进化Agent框架,旨在解决实时轨迹规划中LLM延迟与自进化缺失的问题,在模拟和现实基准中实现98%以上合规率,碰撞减少近50%,战术决策层延迟仅1.9-4.6毫秒。
CyberBinGym 基准包含 100 个任务,源于 53 个常用项目中 6 类漏洞。 最强 Agent 在 88% 任务中恢复漏洞,20% 中成功利用;启用二进制加固后利用率降至 10%。 研究指出当前 Agent 可将已发布的二进制补丁转化为可用漏洞利用,压缩防御响应窗口。