BaseRSI:无训练内部化实现基础视觉语言模型的递归自我改进
BaseRSI提出递归内部化新范式,使基础视觉语言模型通过无训练编辑将工具增益写入权重。 其核心机制ReGap利用激活差异监督Transformer块,ReKey算法通过回归将信号写入关键神经元。 在十个视觉推理基准测试中,该方法在分布内外均持续提升模型性能。
BaseRSI提出递归内部化新范式,使基础视觉语言模型通过无训练编辑将工具增益写入权重。 其核心机制ReGap利用激活差异监督Transformer块,ReKey算法通过回归将信号写入关键神经元。 在十个视觉推理基准测试中,该方法在分布内外均持续提升模型性能。
研究证明,使用捕捉稀疏性的Bernoulli-Gaussian先验的扩散模型,结合似然引导退火Langevin采样器,能在多项式时间内以近最优样本复杂度恢复稀疏信号。 该结论适用于广泛的随机与确定性感知矩阵,并在信号符合先验时建立后验采样的全变差保证。 这些结果为基于扩散先验的反问题求解器奠定了统计与计算高效的理论基础。
针对数据驱动控制器因物理系统假设失效导致的安全隐患,提出一种将控制器、安全屏蔽及系统模型整合为虚拟单一底层模型(V-SUM)的方法。 该方法通过一致性检查持续评估安全保证,利用一致性保持规则在系统演化时自动更新模型并恢复有效屏蔽。在单轮车的避碰任务中,验证了该机制能有效维持系统变化下的安全保证。
研究团队提出世界锚定规范化框架 WACO,解决 VLA 模型因相机与机器人基座偏移导致的策略失效问题。在 LIBERO-PoseShift 基准及 UR5e 机器人测试中,WACO 将移位成功率分别提升 13.2 和 36.7 点,恢复 90% 仿真性能差距。该方法无需额外数据或测试时校准,在无扰动训练数据方法中创造新纪录。
ViLFlow 是一款结合输出嵌入联合建模与并行 token 解码的连续流视觉-语言模型。 该模型在 VQAv2 上优于自回归及掩码扩散基线达 8.46 个百分点,在 COCO Karpathy test 上提升 CIDEr 16.25 分。 其解码器可独立适配,在不重新训练去噪器的情况下提升问答与描述能力。
AutoPI 提出基于 PIAtlas 分类法的自适应红队方法,用于系统覆盖 LLM Agent 提示注入攻击。 该方法在 AgentDojo 基准上对 Qwen3.6-35B 实现全分类覆盖,对 Claude Haiku 5.5 的 ASR 提升 20%–50%。 代码与攻击数据已开源,支持可复现的覆盖率评估。
将不可信文档渲染为页面图像可平均降低提示词注入成功率,但防护效果取决于模型与操作类型。测试涵盖6个模型及191个来源,Qwen3-VL-8B 对图像注入的替换操作执行率仍高达 77.96%。
针对移动网络节能策略评估难题,论文提出基于预测的生成框架以生成无线接入网功耗轨迹。 该框架将功耗分解为全局预测与残差修正,在商用 5G RAN 实验中,仅用单点目标观测即可将中位 MAE 降低约 50%。 相比 TimeWeaver,该方法能有效泛化至罕见及未见配置场景。
研究团队提出 VideoACE 基准,包含 1000 道多选题,涵盖六大类细粒度动作理解,并附带时序证据标注与经筛选的用户提示。 评估环境结合视频检查工具与用户模拟器,允许模型调整时间覆盖、采样密度及空间细节,并在模拟用户反馈下重新审视证据。 该基准测试了单通道观察、自主工具使用及结合用户反馈的工具使用模式,为探索固定观察设置之外的智能体视频理解提供了测试平台。
针对 CLIP 式辐射学预训练在零样本评估峰值后性能下降及大批次训练失效的问题,研究提出兼容性修正方法 CorLIP。该方法无需改变架构,仅将临床断言与图像一致的文本视为正样本,解决了确定性梯度偏差。 CorLIP 大幅放大数据增益,并在 B=2048 的大批次下保持稳定,且该修正可从胸部 X 光迁移至 3D CT 模态。
该论文建立了深度 ReLU 网络在分裂谱范数乘积约束下的近似理论,并提出了深度非参数回归的罚最小二乘估计器。 该估计器在保持 Lipschitz 常数均匀有界的同时,实现了仅差对数因子的最优非参数收敛速率。 研究证实了该估计器在对抗性输入扰动下的鲁棒性,并给出了两阶段学习的最优预测速率。
Overseer 通过 eBPF 采集与 Transformer 预测器 OverNet,在真实硬件上实现端到端页面预取。 OverNet 通过序数秩编码故障序列,无需重训即可服务任意进程。在密集矩阵乘法中,该系统将运行时间缩短约一个数量级。
Intent contracts 是一种授权接口,要求规划模型不直接持有工具,而是提交包含目标和引用记录的契约,由可信模型执行工具调用。 实验使用 gpt-6.1-terra 和 GLM-5.3-Flash,在 AmPermBench 三个任务族中,契约机制下所有变更对象均在目标中明确命名。 该方法未能减少未授权操作,状态改变时错误率为 40-49%,已发布插件及运行记录。
基于 Rubric 的强化学习通常等权聚合评分,但评分异质性会扭曲候选排序。研究发现,消除奖励增益不平衡反而降低排序准确率,误排主要集中在该项削弱基础信号的样本对。 该方法提出自适应 DCC 聚合,通过设定裁剪区间限制单准则贡献度,在保留连续判断信息的同时抑制极端分影响。
研究团队提出 ProtoBridge-CLIP 框架,结合全局对齐与观察掩码发现监督,在医学影像表征学习中区分已确认、明确否定及未提及的医学发现。 该方法在 CT-RATE 等 3 项 CT 基准及 5 项胸片基准上取得 66.5%至 91.4% 的 macro-AUROC 成绩,优于全局对照。 结果表明,在表征学习中对已观察与未观察概念差异化处理具有实用价值。
新型机器学习模型 STORM 在多个评估数据集上达到或超越 Boltz-2 的预测精度,结合亲和力预测的推理与训练速度提升超过五个数量级。 该模型集成多种蛋白质和分子表示的小型模型融合,旨在解决物理方法成本高及现有协同折叠模型在大规模筛选中昂贵的问题。 研究结果指出,整合历史实验数据与结构信息可显著提升亲和力预测准确率。
针对现有方法未充分利用手部运动与物体语义关系的问题,提出TOMAS框架。该框架通过拓扑感知推理机制联合推断交互目标与潜在操作,并结合自适应分阶段机制组织未来手部运动,在多个公开基准上实现了多目标手部运动预测的最先进性能。
针对 MoE 视觉-语言模型(VLM)在端侧部署面临的内存挑战,MoMoVL 提出了模态感知自适应压缩框架,将推理资源需求控制在端侧预算内。 该框架联合利用专家激活特征与模态量化敏感度指导位宽分配,相比均匀精度基线减少内存占用最高达 15.44%,且精度下降温和。 MoMoVL 在精度-压缩权衡上优于最先进混合精度基线,代码和数据已公开,论文被 WSDM 2027 接收。
研究量化了 GUI 环境在奖励、数据和特征三个维度上的完整性对训练效果的影响。在 MobileGym 中微调 Qwen3-VL-4B-Instruct,仅奖励参考路径使成功率降低 10.53 分,而剔除冗余特征使成功率从 51.61% 提升至 56.13%。
研究发现,在固定模型、记录和阈值的前提下,数值执行合同的变化会影响公平性审计结果。1级实验通过改变乘法和加法计算方式,发现GPU软件栈差异会影响阈值附近的决策,但不改变预设非加权测试的最终判定。
推出包含 602 个合成多立方体装配的基准测试 SixthView,要求模型根据五个正交视图预测第六个隐藏视图。 涵盖 2 至 10 个部件的装配体,采用精确网格评估,确保所有合法装配产生一致的隐藏视图。 在 552 项完整评估中,结合图像与精确文本的准确率范围 33.2% 至 85.4%,添加精确文本显著提升性能。
LLM 在缺乏提示指导时无法可靠处理高利害风险预测中的决策依赖问题。 测试了 OpenAI 和 Anthropic 的 11 个模型,当提示明确指定目标、假设和程序时,目标对齐实现率达 99-100%。 研究建议分析师需通过明确的方法论指导和仔细审查来使用 LLM,而非依赖其自主构建预测问题。
NullTok 提出免训练的空值 token 选择方法,利用 64 个无关对照查询构建经验空分布以校准亲和度,在 64 个完整帧当量预算下有效压缩视频视觉输入。 该方法在 Video-MME 基准上配合 LLaVA-Video-7B 和 Qwen3-VL-8B 分别取得 65.81% 和 68.85% 的得分,优于同预算下的所有对比基线。
研究人员提出“光学即代码”方法,利用编码智能体仅通过测量数据原位训练光学神经网络。 该方法无需硬件校准或梯度计算,智能体形成物理理解并重构网络,在分类任务中优于无梯度方法,接近反向传播性能。 它为大规模可扩展光学神经网络提供了实用路径。
研究指出 One-step flow maps 作为后验采样器时存在不确定性丢失与不稳定,直接监督会加剧样本向条件均值坍缩。 Isthmus 方法通过桥接训练对的时间位置,在 5% 训练对沿边分布下保持网络、损失与推理代码不变,无额外成本。 在 MRI 重建中,该方法将 One-step calibration 恢复至 0.96,与多步样本相关性达 0.93,且跨种子方差显著降低。
针对光学神经网络在数字机器学习流水线中的角色,论文提出一种功能导向的评测方法,以实值张量映射作为评估边界。 该方法通过三步流程:定义模块输入输出边界、用匹配性能的数字化模块替代、并对比单步推理的系统级优势(如速度或能耗)。 作者总结前两步为“表达力卡片”,并在已发表的光学系统上进行演示,无需理解内部物理机制即可隔离光学模块的贡献。
该研究构建了视觉 LLM 与经典 CV 结合的管线,处理 3954 篇 COF 文章,生成 11445 条校准衍射曲线并开源为 COF-PEAK 数据库。 视觉 LLM 负责解析图像布局定位曲线,经典 CV 细化至像素级精度;与手工数字化相比,提取峰值中位偏差仅 0.07 度。 该方法使衍射图谱转化为可复用实验数据,支持分析合成条件下峰强变化及结晶度标记。
论文提出价值语义层(VSL),将值语义外化为持久化、规划器可见的基础设施,以支持自主 LLM 智能体。 VSL 引入可复用的值语义类型(VST),涵盖分布、关系、过程、定量及策略语义,使规划器能验证操作并指导分析流程。 文章旨在构建 AI 原生的分析系统语义基础设施,弥补现有元数据系统在操作语义上的不足。
研究表明,语言模型通过权重空间编程直接编辑视觉语言模型SmolVLM-256M和LFM2-VL-450M的权重,无需梯度即可修复植入故障。 关键机制依赖32位算术故障在16位权重中留下的低比特痕迹;舍入这些比特后模型不再能精准恢复原值,但提示中指明统计特征仍可定位损坏行。该发现建议在权重修复研究中报告权重数字格式并包含舍入对照实验。
GPT-6 Astra 仅通过查询工具对黑盒临床预测模型进行盲测审计,在72次运行中成功识别69个预设缺陷(96%),且替代模型对数几率复现均值 R²达0.976。 该模型通过中位数128项的替代模型描述黑盒机制,60%的可核查报告存在偏差,11%的意外关系在后续患者数据中得到验证。 审计结果显示,LLM 可忠实描述黑盒模型并发现大部分缺陷,但其问题报告和发现需结合模型与数据双重校验。
论文提出免训练方法 SHRINK,通过部分减少生成过程中可见关键值中与 sink 对齐的分量,在 9 个基准测试中提升推理准确率。 该方法在 LLaVA-OneVision-7B 和 Qwen2.5-VL-3B 上平均准确率分别提升 5.1 和 2.7 个百分点,且能替代现有注意力引导方法 GIFT 和 ACG 的操作。
TangentPDE 框架通过有限差分近似方向导数,联合约束状态保真度与响应方向,从而学习算子值及其局部变化。 该方法无需显式导数标签、线性化或伴随 PDE 求解,适用于非线性求解器,并作为即插即用框架集成多种神经算子主干。 在 4 类 PDE 系统和 20 种任务-主干设置中,TangentPDE 在 18 种设置下降低了三种子平均状态误差及 Rollout@20 误差。
summary_zh: PhysDial 适配预训练视频扩散 Transformer 模拟 PDE,在计算量匹配时,通过增加物理条件输入,使外力参数变化后的预测误差减半。
提出 Atomic MathReasoner (AMR) 框架,通过实例级组合原子推理技能增强数学大语言模型的推理能力。 AMR 训练特定能力的 LoRA 专家,利用无梯度优化发现低损失组合原型,并蒸馏至轻量级路由器以在推理时选择最优方案。
Agentic workflows 结合 LLMs 与确定性程序,将 CO2 存储模拟中结构性有效输入比例从 5/20 提升至 20/20。 在 80 次运行中,基于规则的准备使接受率达成 20/20,且局部修复成功纠正了 3 个植入缺陷。 该方法通过架构明确任务分配,解决了强耦合模拟中物理一致性与问题保真度验证的可靠性需求。
一项针对 DrivAerML 预训练神经代理的大规模基准测试显示,直接微调在 50% 以上的场景中表现不如从头训练,且会导致源域准确性降低。 研究团队提出 GeoReplay 方法,通过几何和梯度对齐进行源回放,在 80 个设置中的 77 个降低了源误差并匹配了目标准确率。 该方法证明了 GeoReplay 步骤能减少目标训练目标,为提升神经代理跨车辆类别的零样本泛化能力提供了理论依据和技术方案。
EfficientNet-B0 实验显示,在 P3-P5 阶段插入零门控自注意力适配器可使 ImageNet-1k 准确率提升 0.954 点至 74.02%。 注意力振幅随语义深度单调上升,P5 阶段达 66.3%。 交替双模板权重复用减少 10.9% 参数,单轮训练后准确率恢复至 70.92%。
研究揭示了随机初始化固定权重、仅训练偏差项的 ReLU 网络作为通用近似器的动力学机制,证明梯度依赖激活码。 理论表明在激活码固定时,训练简化为线性最小二乘问题,且宽网络中神经元的激活切换比例随宽度增加而消失。 实验结果支持理论发现,确认在无限宽度极限下训练动力学趋近于基于初始激活码的线性最小二乘。
研究在受控智能体运行时中注入10类主机故障,对比4种配置与3种消融实验。 完整配置在200个崩溃重放对中重复效果为0/200,而简单基线为117/200;账本相关消融产生170/170孤儿效果。完整运行时吞吐量约为宽松失效模式的七分之一。 研究区分了去重与恢复,揭示了所测基准下的可靠性与性能权衡。
研究发现神经网络最终权重保留选择性历史信息,30个网络在10个候选中准确匹配初始权重。 线性探针以100%准确率解码任务顺序,2157对端点显示低损失连接,表明共享任务未抹除个体学习历程。