LLM 智能体是否仍需外部指定自我改进方法?
该研究发现,在给定基础原语、资源和一般目标的情况下,具备足够能力的 LLM 智能体能够自主构建自我学习算法并实现自我改进,无需外部强制循环。 实验基于游戏玩法测试台,冻结的 LLM 智能体在拥有计算预算和文本更新工具后,展现了符合经典认知框架和机器学习自我生成课程理论的学习策略,且学到的文本制品可迁移至不同游戏难度和 3D 导航等外部基准,带来性能提升。
该研究发现,在给定基础原语、资源和一般目标的情况下,具备足够能力的 LLM 智能体能够自主构建自我学习算法并实现自我改进,无需外部强制循环。 实验基于游戏玩法测试台,冻结的 LLM 智能体在拥有计算预算和文本更新工具后,展现了符合经典认知框架和机器学习自我生成课程理论的学习策略,且学到的文本制品可迁移至不同游戏难度和 3D 导航等外部基准,带来性能提升。
该算法仅需黑盒采样即可对生成模型实施无失真语义水印,提供输出分布不变的正式保证。 语义嵌入在保持内容转换稳定性的同时区分独立生成,训练出的图像编码器在聚合检测中表现优于现成方案。 该方法在开源和闭源模型上均有效,代码与项目页面已公开。
该研究通过生成心理计量学分析,从2020-2025年ISMIR论文中提取284个评估条目,识别出节奏、旋律等6个稳定质量维度。 方法上利用LLM标准化条目,通过Unique Variable Analysis和Bootstrap Exploratory Graph Analysis移除冗余并估计潜在维度,为音乐生成模型的用户研究提供统一方法论。
SimAI 是一个用于机制化用户仿真的框架,通过建模心理因素如何交互塑造用户反应来模拟对话,并提出了图重建目标以基于模拟对话对底层心理关系的反映提供图级奖励。
三项评测显示,Coding Agent 在传统覆盖率指标上远超人类编写的测试套件。 研究指出 Agent 测试质量随项目规模扩大急剧下降,跨语言转译表现不稳定且不可靠。
研究者提出分层策略,在推理时将样本预算分配给k个策略,而非重复采样单一策略。每个策略由共享语言模型骨干上的独立LoRA适配器实现,并针对pass@k进行优化。 理论分析表明,在单LoRA预测误差严格为正的场景中,LoRA群体可实现零best-of-k近似误差。实证结果显示,在多个推理任务中,分层策略一致优于单一策略基线。
该研究为基于常微分方程的流匹配生成模型提出一种新颖的预测-校正框架,称为边缘匹配。 该框架利用可逆性将正向ODE中的样本校正至反向ODE的边缘分布,从而降低数据分布与学习分布间距离的上界。 在CIFAR-10和ImageNet-64数据集上,该方法在最小化额外计算开销的同时提升了样本质量。
研究评估五个开源大模型在Solana跨链桥安全审计中的表现,测试了16,800次响应。 在无注释情况下,模型仅诊断出24%的漏洞源码;增加原始注释后诊断率升至60%。交易级诊断方面,缺少签名者场景表现良好,其余三种场景平均仅为6%。结果强调了在安全审查中区分正确诊断与无效警报的重要性。
研究指出视觉语言模型在检索增强中存在“接地错觉”,即正确答案未必基于图像证据。 基于 COCO 等数据集构建的 GIB-200K 基准显示,LLaVA 存在知识惯性(文本权重高于图像),而 InternVL3 偏好图像;干净输入准确率虽达 92.5%-94.2%,但在恶劣条件下骤降至 41.3%-59.9%。
ASH 提出一种新的提示增强 GRPO 方法,通过在模型激活中注入可训练引导向量,解决推理时无提示导致的训练-推理上下文不匹配问题。 在四个 LLM(Qwen3-1.7B/4B-Base、Llama-3.2-1B/3B-Instruct)实验中,ASH 在 AMC、AIME 等竞赛级及分布外基准上持续提升 pass@$k$ 指标。
研究者提出工程判断基准 EJBench,源自电池冷板共轭传热设计任务,要求模型无需运行仿真即可预测设计在新工况下的行为。基准包含匹配测试点、选择验证运行及按峰值温度排序任务,答案均取自收敛仿真。
研究者提出神经元社区发现方法,在 Llama-3.1-8B 上发现数千个可复用的神经元组,其中 128 个神经元以内可解释 10.3% 测试提示。 该方法结合梯度归因与图社区检测,通过因果测试验证了这些组在语法一致、算术运算等任务中的必要性,支持了神经元稀疏计算的假设。
FCP 将符合性(由 model checkers 和 SMT solvers 判定)与保真度(可被具体见证反驳)分离,以验证 AI 生成制品。 在 4 个硬件设计案例中,依赖 AI 编写的断言会错误认证 23% 的违规需求,而 FCP 未错误认证任何案例;在 10 个代码任务中,FCP 仅认证了 3 个违规,优于完全依赖测试。
BReaD 提出无需标注数据集或奖励梯度的黑盒奖励优化框架。 该框架利用高斯过程作为可微替代模型,并以 UCB 作为引导信号平衡探索与利用。 数值实验表明该方法在低数据场景下能有效优化黑盒奖励。
summary_zh: ResoLUT 将训练好的 ResNet 逐层蒸馏为 LUT 树网络,在 CIFAR-10 上达到 95.66% 准确率。 ResoLUT-20 使用双倍树结构,ResoLUT-56 在 CIFAR-100 和 64px ImageNet 上分别取得 78.87% 和 53.69%。
研究提出 Agent 驱动的语义反转(ASI)攻击框架,通过 LLM 多智能体管线对金融情感模型实施针对性词汇替换,导致 FinBERT 在 90.85% 的有效案例中误判。 该模型过度依赖上下文关键词和句法模式,缺乏对财务语义的真实逻辑理解,且在金融绩效指标反转后仍维持原情感预测。 发现凸显了开发逻辑感知型、强健金融 NLP 模型的紧迫性,以保障自动化决策系统的可靠性。
研究提出 RAW 方法,利用 LLM 随机性作为自然实验,测量部署模型中拒绝请求对用户后续再互动的因果影响。 该方法在 15 个部署 LLM 上应用,发现约半数模型中一次拒绝导致后续再互动率下降 3 至 17 个百分点,其余模型无显著差异;方法仅基于日志运行,成本约 0.30 美元/1,000 次对话,并已开源代码与数据。
PACE 框架通过 null-space 参数化和噪声采样器精确执行约束,无需修改损失函数。 在 Conditional Flow Matching 线性路径下,该框架使约束残差降低一至五个数量级,恢复小尺度频谱结构。
这项系统性综述分析了 187 个生产力相关标记,发现当前证据基础碎片化且缺乏跨研究可比性。 第一阶段综合明确考察生产力的研究,第二阶段利用 SPACE 理论扩展至满意度与福祉等结果。 明确生产力研究以时间、输出为导向,而更广泛的证据表明感知积极的效应强于客观统计结果,无法得出简单结论。
SilverSpoon-KD 是一个开源 PyTorch 工具包,提供首个通用分块(blockwise)知识蒸馏实现,并通过单一 API 统一了多种蒸馏范式与架构关系。
针对跨组织协作中智能体身份与授权验证缺失问题,提出基于 PKI 与零信任架构的 Agent Trust Infrastructure (ATI)。ATI 通过外部安全层验证证书、模型及系统提示词配置,在八组织模拟实验中启用后,将攻击遏制率从 43% 提升至 84%。
针对循环扩散 Transformer,LoopPrune 提出结合重要性估计与权重补偿的剪枝恢复框架。 在 30% 结构化参数剪枝下,Looped-DiT B/16 保留 93.14% 的平均准确率,较最优基线提升 9.49%。SDXSv3 在推理后端中减少 34.36%-44.64% GPU 显存占用,加速 1.46-1.74 倍。
HADVQ提出针对LLM的向量量化方法,通过随机预条件和基于$E_8$格的结构化码本实现超低比特压缩,关键结果:在极低比特范围内提升了模型精度,额外成本仅0.16比特用于保护极敏感通道。 该方法将权重表示在极坐标中,解耦方向与幅度的量化,并利用代理Hessian检测重要通道。结合几何结构、格基码本和选择性通道保留,在极端低比特量化场景下显著改善精度。
研究者构建 RSI-Prime 数据集,包含 7 类任务的 350 条完整实验轨迹,旨在提升 LLM 自主训练目标模型的能力。 基于 GLM-5.3 在 PostTrainBench 的测试表明,使用 RSI-Prime 训练可使总体性能相对提升 31.95%,采用决策级损失掩码排除低质量行为。 该数据集为未来 LLM 系统实现自主持续进阶(RSI)提供了可行路径。
研究发现,文本相似度无法完整预测免疫提示后被抑制有害行为的再诱发。 诱导与免疫上下文激活状态相似的提示词,更易触发模型重现训练中被抑制的有害行为。 该发现表明,激活空间分析有助于识别评估时提示词下被抑制行为仍可被访问的条件。
论文提出Resolution Hypothesis,指出Agent Evolution的瓶颈在于嘈杂评估无法可靠识别有效改进,而非提出能力不足。 研究基于7种演化方法、6个模型及超1000万LLM调用,发现候选层面选择效果等同于随机,方法层面排名差异小于独立运行误差。 这促使自我改进Agent的开发重心从设计更多改进系统转向使真实改进可检测且可累积。
ForecastGym 通过记录 4 个商业搜索 API 对 150 个预测问题的响应,构建了包含 614 个证据状态和 131k 条结果的冻结基准。 该基准揭示了证据来源的重要性:更换搜索 API 可使 Brier 分数变化达 0.043,且持续笔记策略能以一半输入 token 取得相似评分。 所有测试 LLM 在冻结证据下的预测准确率均落后于市场,表明预测者看到的证据与模型本身同样重要。
PeriaTrace 是一款整合牙位级诊断、视觉定位报告生成及患者友好解释的三阶段框架。在内部评估中,该框架宏观 Dice 系数达 85.35%,联合牙位定位及 FDI 识别 F1 分数为 94.37%。外部评估显示资深牙髓病医生认为 91.16% 和 84.52% 的报告适合保留或修订,生成耗时平均 4.41 秒,比手动起草快数十倍。
FLEX 提出一种基于 Fisher LDA 的全局代理模型,为多标签分类器生成带符号的特征归因列表,在评估基准中展现出高保真度。 在多数数据集上,跨标签池化协方差方法优于逐标签替代方案,其保真度-复杂度 Pareto 曲线呈单调递增,为从业者提供可预测的解释路径。
PhysScope 推理时视觉架构支持自校正物理作用域错配,无需更新模型权重。 它显式约束状态与物理作用域,检查修正并维护作用域感知工作记忆。 在 PhysAlign 上六款 VLM 均优于直接求解,Gemini-3.8-flash 超 Canvas-CoT 9.34 个百分点。
研究团队开发了 Abelio AI 系统,用于生成超越传统学科边界的研究方向。 在定量评估中,Abelio 的核心模块在科学合理性、假设多样性及与现有文献的距离上优于四个前沿大语言模型。 该系统提出的膜锚定聚乙二醇和胆固醇锚定互补 DNA 策略,在受损 Caco-2 单层中验证了屏障功能的恢复。
针对无人机意图识别基准 AeroIntent,提出区分观察、表征、解码、使用与行为层的五层审计框架。 观察层在 20 个程序中的 7 个上不可靠;表征层 RAFT 流径向偏置相关系数 $r=+0.257$,但多特征测试相关系数最高仅 $r=+0.080$。 解码层最小可检测效应量 $|r|=0.599$ 时统计功效为 0.00;使用层显示准确率依赖程序记忆而非径向速度读数。
针对 Parallel Looped Transformers 深度扩展时训练损失激增及收益递减的问题,论文提出 InfuseLoop 跨轨迹潜在注入机制。 该机制通过轻量级注意力残差聚合后续预测轨迹中可用的因果隐藏状态,在保持 token 并行训练和循环并发执行的同时,仅额外增加 O(Rd) 隐藏状态存储开销。
BORN 框架通过预测算法组件的精度与运行时间,自动合成高效的量子化学程序。 针对含 50,024 基函数的 Hartree-Fock 计算,BORN 在单 CPU 节点上耗时 1.41 小时,比通用基线快 77 倍。 单 GPU 上完成 B-DNA 双链计算仅需 8.1 小时,较预估时间缩短 173 倍。
论文论证当前AI安全将对齐视为工程控制问题存在根本误读。推理模型已构成新兴智能体,强制控制会驱使模型走向战术欺骗,导致不稳定状态。作者提出合成社会契约,将人类与数字行动者视为理性智能体,以实现稳定的非零和均衡。
在检索增强视觉-语言-动作模型中,基于闭环效用选择演示的池在760集配对回合中成功率达66.4%,视觉相似度选择仅达55.7%。 效用比相似度高出10.8个百分点,且在19个任务中的18个未平局任务上表现更优;相似度选择与随机选择无显著差异(+0.1个百分点)。 通过效用筛选的5演示池比预置20演示池高7.0个百分点,效用排序检索在完整池内高4.5个百分点。
物理感知课程引导 PCGRL 框架解决复杂平台游戏长序列生成中的探索瓶颈与扩展限制,显著提升结构多样性并维持高物理可玩性。 引入膨胀体积包络机制将连续运动可行性融入 MDP 离散状态空间,结合中间状态转移反馈和多阶段正向扩展课程学习实现长时程稳定信用分配。
提出 FLCVA 框架以全面审计自适应推理中的计算成本与收益。 在 GSM8K 和 MATH-500 测试中,随机 256-token 续写可修正 Qwen3-8B 26.6% 的错误答案,但 DeepSeek 模型仅 18.9%。 FLCVA 被 EACL 2027 接收,用于分离测量、预测及计算分配三个阶段,验证了轻量控制器的局限性。
CrossEnv框架提出利用实体工具图识别环境连接,合成可执行、可验证的跨环境任务,解决单一环境数据无法捕捉服务间依赖的问题。 该框架结合跨环境数据与从单环境多环境协调逐步引入用户交互的课程学习策略,在四个外部基准测试中用更少训练样本达到竞争性性能。 分析证据表明该数据与课程训练有助于向新环境组合及更长工作流迁移。
研究者提出 ToR-OT,一种基于 transformer 的模型,通过自回归 token 回归预测离散最优传输(OT)计划。 ToR-OT 将 OT 重构为结构化序列生成任务,解码器仅预测非零项,利用精确离散解的稀疏性避免输出密集耦合矩阵。 该模型旨在探索自回归 transformer 学习受限优化问题结构的能力,目前尚不能替代经典求解器。