LatentGym:支持跨任务经验学习且具有可控潜在结构的测试平台
论文提出 LatentGym,一个支持跨任务经验学习且具备可控潜在结构的测试平台。 每个环境由真实潜在变量控制任务结构,指标区分探索与信息利用。实证研究表明前沿 LLM Agent 在相关任务适应上的缺陷及后训练收益。
论文提出 LatentGym,一个支持跨任务经验学习且具备可控潜在结构的测试平台。 每个环境由真实潜在变量控制任务结构,指标区分探索与信息利用。实证研究表明前沿 LLM Agent 在相关任务适应上的缺陷及后训练收益。
研究人员提出 Standard Interpretable Model(SIM)理论,通过公理推导可解释对称性约束,解决了可解释性方法设计缺乏一般理论的问题。 SIM 表明完整表达能力与可解释对称性可在同一模型中共存,证明了准确性与可解释性的权衡是模型设计的伪影,而非本质矛盾。
研究指出归因补丁的误差主要源于下游网络非线性,而非局部曲率。 提出可靠性分数、误差边界及HVP修正工具;在124M至9B模型上,多步HVP在更低计算成本下达到或超越积分梯度精度。 支持在电路恢复基准上以更低算力实现更高保真度,并定位不可靠组件。
KV 缓存量化在降低显存的同时可能破坏 LLM 的安全对齐,Mistral-7B 在仅 1.03 倍困惑度损失下失去 15.2% 拒绝能力。 研究提出 Per-Channel Reduction 诊断方法,揭示了安全特征在低维激活子空间中易受量化噪声影响的几何根源。 该无训练协议只需约 35 GPU 分钟,即可在 vLLM 生产环境中恢复高达 97% 的丢失对齐。
研究者提出 WoVR 框架,利用受控的世界模型模拟器解决 VLA 策略强化学习中闭环想象 rollout 的幻觉与误差累积问题。 框架通过可控动作条件视频世界模型、关键帧初始化 rollout 及世界模型-策略共进化机制,实现稳定长程模拟与高效策略优化。 实验显示 WoVR 在 LIBERO 基准测试中性能优越,并在多个真实机器人平台上带来一致性能增益。
ADWM提出了一种离线评估LLM智能体策略性能的框架,仅利用预收集的轨迹数据,无需在线环境交互。 该框架通过潜变量扩散世界模型模拟环境响应,将每一步转移建模为独立去噪过程,并由策略条件得分函数引导生成,避免了自回归模型的误差累积。 实证结果表明,ADWM在多种多轮任务中实现了准确的数值估计和评估可靠性,是实用且低风险的离线评估方案。
当前 SOTA AI 生成图像检测器主要利用生成管线引入的全局伪影而非局部合成内容进行判断。 研究提出无模型诊断 INP-X,构建 30K 匹配三元组基准;该方法使商用 API 准确率从 >90% 降至 ~55%,DDA 从 97.6% 降至 58.4%,且 97% 的背景光谱偏移归因于 VAE 自编码器往返。 人类感知准确率从 63.8% 降至 56.2%;检测 INP-X 编辑仍属开放问题。
团队提出新方法在预训练和中训练阶段引入安全、事实性和推理行为,利用强模型重写数据并评判策略模型。 该研究引入“自我改进后思考”概念,通过生成后推理提升模型自身推理与判断能力,实验显示在多维度带来性能提升。 arXiv:2601.21343
提出自适应因子记忆框架 ForecastCompass,用于智能体预测任务。该框架包含因子记忆和推理记忆两个组件,通过回顾性分析迭代修订记忆,积累可转移的预测知识。
一项指令级故障注入研究发现,LLM 的可靠性特征显著受模型架构、参数规模和任务复杂度的影响。 该研究通过多维度分析揭示了 LLM 在软错误下的易感性,不同于传统的视觉任务神经网络。 这些发现为设计更有效的容错机制提供了新见解。
LAPLEX 提出了一类精确且可训练的(相位)拉普拉斯核算子,兼具 FFT 级扩展性,支持在向量维度达 $10^9$ 的现代 GPU 上进行可训练矩阵-向量操作。 该算子作为神经网络层提供紧凑投影,并作为高效 Gram 算子支持高维协方差模型,在维度 $3 \cdot 10^6$ 的扁平化图像上保留空间结构且无卷积偏置。
该研究提出结合UNet粗定位与SLIC超像素细分的混合流水线,在眼底图像脉络膜痣分割中实现90.9%的平均Dice指标。 方法在25张保留测试图上优于nnU-Net(83.2%)、Swin UNet(73.0%)及Attention UNet(60.6%),推理无需GPU,1024×1024图像耗时仅1.6秒。
LSD-3D 提出了一种直接生成具有准确几何的大型三维驾驶场景的方法,实现了包含物体持久性的因果新颖视图合成。 该方法通过结合代理几何与环境表示的生成以及从学习到的二维图像先验中的分数蒸馏,实现了对几何和高分辨率纹理的高可控性,可基于地图布局进行条件生成。
针对线性注意力长上下文推理中状态更新导致的内存访问瓶颈,提出IO感知服务机制KVBuffer。该机制通过缓存键值对实现批量解码、并行验证投机解码及短上下文直接计算。 KVBuffer已在SGLang中实现,支持Qwen3.5和Nemotron-3系列模型,使批量解码速度提升最高1.47倍,投机解码最大服务请求量增加5倍。
该论文提出了一种针对数据受限训练的规范性扩展定律,通过单一系数建模重复训练导致的过拟合,证明了在特定阈值后增加模型容量比继续重复数据更有效。 该法通过隔离过拟合项实现了不同训练配置的直接对比,并解释了为何数据受限场景下较大的权重衰减(如 $\lambda=1.0$)能提升性能。
论文提出 HyCNN,结合 Maxout 与 ICNN,保证输入凸性且比 ICNN 用指数更少参数逼近二次函数。 在凸回归、插值及高维最优传输实验中,HyCNN 通常优于 ICNN 与 MLP。 该模型在单细胞数据等场景中表现更佳。
研究揭示被动收集的多源异质思维链(CoT)数据即使单源学习容易,整体学习仍具密码学难度。 难度源于难以学习的贡献偏差或未过滤的混合数据,但过滤后的同质子集足以支持高效学习。 提出一种主动且自适应的高效算法,其按源 CoT 预算与目标误差完全独立,指明了 CoT 监督的数据收集与策展实践。
扩散语言模型自验证机制提出双向流形一致性方法,通过训练自由指标量化生成序列稳定性。 该方法利用前向掩码与反向重建周期,识别有效生成轨迹在分布高密度流形上的稳定吸引子特性,抑制无效路径偏离。 BMC指标支持无需参考答案的解决方案有效性诊断,并作为密集几何奖励实现稀疏监督向细粒度引导转化。
CLaRE 提出轻量级表征层技术,通过前向激活量化事实间纠缠,平均提升 62.2% Spearman 相关系数且速度提升 2.7 倍。 CLaRE 避免耗时的反向传播,峰值 GPU 内存减少 2.85 倍,仅需少量存储空间即可计算并保留事实表征。 纠缠图谱和语料库可用于构建更强的模型编辑保留集、审计追踪及高效红队测试,相关文件已开源。
DUEL 框架统一了确定性掩码扩散模型采样器,通过精确计算似然替代 ELBO 作为评估指标。 该算法无需重训即可应用,将掩码扩散模型与自回归模型的困惑度差距缩小最高 82%,使计算差距从 16 倍降至 9 倍。 使用 DUEL 评分 LLaDA-8B 多选题任务,准确率最高提升 9.7 个百分点,证实了该模型相比 ELBO 评估更具竞争力。
论文提出统一框架,将 Knapsack 与 Top-k 算子建模为动态规划,通过平滑递归推导可微分松弛。 开发了支持确定性/随机前向及向量-Jacobian 反向传播的并行算法;证明 Shannon 负熵是唯一的可分离正则化选择。 在 Knapsack 预测、离散 VAE 扩展及受限动态组合 RL 问题上验证了框架的有效性。
研究团队提出 Reward Engine,通过构建冻结的 RewardPack 为缺乏标准答案的开放式工具任务生成可执行奖励。在 WorkBuddy Bench 和 Claw-Eval 中,该奖励机制与基准评分者排序一致率分别达 82.3% 和 80.5%。
LAMP 提出一种基于舍入误差分析的前瞻自适应混合精度推理策略。该策略在 Transformer 中通过仅对 g(x) 的少量关键组件进行高精度计算,其余部分采用低精度执行。在 GPT-2 模型上的数值实验表明,极低的重计算率即可实现高达两个数量级的精度提升。 该算法已被 NeurIPS 2026 接收,为本地化部署的大语言模型提供了高效的推理优化方案。
新模型通过 Teacher-Student 框架在稀疏观测下实现跨时空泛化,重构了孟加拉国 2003-2022 年高分辨率地下水深度。 Student 模型在未见年份与地区验证中 R2 分别达 0.93 和 0.70,无需当代现场测量即可重建水位变化。 研究揭示全国地下水补给年均下降 1.10 mm/yr,55.6% 区域补给显著减少,为数据稀缺含水层监测提供可扩展方案。
Social Humanoid是一个分层系统,能让29自由度Unitree G1机器人根据人类伙伴动作生成并执行全身运动。 该系统通过共享令牌化表示进行序列建模,预测被遮挡的伙伴动作;利用两阶段自适应重定向方法,在五个动作捕捉数据集上生成了260小时的人-形机器人交互基准。 结果在模拟和真实世界中展示了协调的人机行为。
ThermoLLM 提出一种基于 LLM 的多区域 HVAC 控制框架,通过在五个区域、六种气候季节场景中与标准方法及最新 SOTA 基线对比,持续取得最佳的能效-舒适度权衡,并在所有场景的 TOPSIS 排名中优于所有基线。
StreamMemBench 是一个流式基准,基于 EgoLife 自我中心视频流构建两步任务序列,评测 Agent 记忆将观察转化为未来辅助的能力。 该基准通过四项指标诊断证据回忆、初始证据使用、反馈整合及后续复用情况,实验显示八种记忆系统在两项骨干上常无法可靠利用本地反馈。 研究已被 EMNLP 2026 Findings 接收,基准公开可用。
针对LLM在时间序列数据质量评估中维度识别困难和纯文本推理的局限,研究者提出TSQAgent智能体推理框架。 该框架包含Perceiver(感知器)、Inspector(检查员)和Adjudicator(裁决者)三个协作角色,并配备外部分析工具以支持量化比较。 在TSQBench及11个真实数据集上的实验表明,TSQAgent显著提升了LLM的质量理解能力、量化比较精度以及下游任务的数据效率。
VisAnomReasoner 在 VisAnomBench 基准测试中,精确率与 F1 分数较基线分别提升 21.23 和 23.87 个百分点。 该模型通过微调构建,在 TSB-AD-U 交叉泛化实验中,精确率与 F1 分数也分别提升 9.57 和 13.39 个百分点。 该研究已被 NeurIPS 2026 接收,解决了异常检测缺乏自然语言推理依据的问题。
LinAlg-Bench 发布,评估 10 个前沿 LLM 在 3x3 至 5x5 线性代数计算上的表现,发现模型在 4x4 规模存在行为阈值。 基准包含 660 道 SymPy 验证题目及 6,600 条模型输出,通过自动化流程将 1,156 个错误归类为十种主要标签。 研究表明,模型故障非随机而是受算法类型与维度约束,且 4x4 以上主要失败模式转为“计算放弃”与“幻觉编造”,而非执行错误。
KeHoSu 提出基于同形异码字符的文本溯源方法,利用Unicode码点在复制粘贴渠道中传递标识信息。 该方法将同形字符变体编码为平台、用户及认证标签位,对句序重排具有不变性。 实验显示,在18个平台上,约两句话长度的LLM生成文本即可实现多数片段正确归因。
在 Qwen3-Coder-30B 上,因果定位法在语言分布偏移中使判决正确性预测保持 0.09 AUROC 领先于输出置信度。 该优势显著优于最佳非因果预测器 0.04 AUROC,但在 gpt-oss-20b 或基准测试偏移中未能一致泛化。 对于程序正确性,预测器主要通过识别模型易失败的问题在基准间成功迁移。
ProCompNav提出主动实例导航与比较判断框架,解决机器人处理模糊查询时确认负担重的问题。 该方法通过递归比较判断(RCJ)迭代缩小候选池,显著降低用户回复长度并提高成功率。已获NeurIPS 2026 Oral接收,实证研究证实用户更偏好其生成的二选一问题。
现有 LLM 安全评判器难以区分规范性改变与无意义改写,内容保持的政策重写导致高达 9.1% 的判决翻转。 18-43% 的判决翻转发生在无歧义案例上,且该失效模式在前沿模型中依然显著。 研究提出策略不变性评分与评判器卡片协议,已被 NeurIPS 2026 接收并开源相关代码。
研究团队推出基准测试 ASTRA-bench,集成时变个人上下文、交互式工具箱及复杂用户意图,包含 4 个角色生成的 2413 个场景。 评估显示 Claude-4.5-Opus 和 DeepSeek-V3.2 等高复杂度场景下性能显著下降,论证生成为主要瓶颈。 该基准公开完整执行环境与评估脚本,旨在为开发真正具备上下文感知能力的 AI 助手提供诊断平台。
研究发布基准 ProMoral-Bench,对比四种 LLM 家族的 10 种提示范式。 使用 ETHICS、WildJailbreak 数据集,提出统一道德安全评分(UMSS)。紧凑示例引导框架在低 token 成本下优于多阶段提示。
文章提出 LLM 静态训练无法适应动态部署环境,主张 Agentic Evolution 作为适应路径,提出 A-Evolve 框架及 evolution-scaling 假设。 A-Evolve 将部署时优化视为针对持久系统状态的目标导向过程,adaptation 能力随 evolution 计算量扩展。 代码已公开,为实现开放式持续适应提供可扩展方案。
研究人员提出Dreamer框架,结合序列、深度及稀疏专家注意力,解决深度循环模型在恒定隐藏尺寸下的潜在推理瓶颈。 该模型在语言推理基准测试中,相比同等FLOP、参数和内存配置的SOTA模型,训练所需token减少2至8倍,性能超过2倍规模模型,且专家选择多样性高出2至11倍。
论文提出 ARMs,一种利用推理增强多步编排的自适应红队智能体,旨在系统性评估视觉语言模型(VLMs)的安全漏洞。 该系统集成了 17 种红队算法并设计了 11 种多模态攻击策略,通过 epsilon-greedy 探索算法平衡攻击多样性与有效性。 实验显示 ARMs 攻击成功率平均高出基线 52.1%,在 Claude-4-Sonnet 上超过 90%。
研究基于随机梯度 Langevin 动力学(SGLD)训练的深度非参数回归模型,利用 PAC-Bayesian 分析建立了同时考虑网络逼近误差、统计复杂度及算法代价的超额风险界。