线性时间 Minimum Bayes Risk 解码方法
Minimum Bayes Risk(MBR)解码通过参考聚合将效用估算复杂度从 O(n^2) 降低至 O(n)。 该方法利用聚合参考表示近似成对指标分数,在保持 MBR 质量增益的同时提升效率,开源代码已发布。 该研究发表于 ACL 2024,v3 版本包含 ChrF 指标更精确的时间测量。
Minimum Bayes Risk(MBR)解码通过参考聚合将效用估算复杂度从 O(n^2) 降低至 O(n)。 该方法利用聚合参考表示近似成对指标分数,在保持 MBR 质量增益的同时提升效率,开源代码已发布。 该研究发表于 ACL 2024,v3 版本包含 ChrF 指标更精确的时间测量。
FERN 融合三个冻结检索器生成 100 个候选,并用 120 个特征经 LightGBM 排序,在 Spider 上 top-5 complete 达到 95.6%,超过 RASL 的 83.9%。 系统在单张 A100 上每问中位延迟仅 208 ms,无需调用托管模型;但 BIRD 无证据时 recall@5 落后 RASL 8.2 个百分点,Fiben 上表现差距更大。
Walrus 是一个基于 Gemma 4 初始化的 8B 统一语音与音频基础模型,支持 ASR、翻译、TTS 等 20 多项任务及 100 种语言。 该模型采用数据为中心的训练策略,通过三阶段课程学习平衡不同任务,预测低比特率离散语音 token 并由轻量解码器转波形。 在多数多语言、多说话人基准上领先同级开源模型及专用模型,性能匹配或超越 4 倍大小的 Qwen3-Omni。
针对LLM越狱攻击,本文提出TERM无目标熵引导残差调制方法。该方法在推理时利用提示词校准的注意力熵偏差,自适应调整模型自身残差更新,避免了预定义安全方向。 在Llama、Qwen和Gemma模型上,TERM在7种越狱攻击和2个过度拒绝基准测试中提升了鲁棒性,且保持低过度拒绝率,具有适中的推理开销。
UTF-8 编码因其变长设计引入跨语言不平等,其影响研究不足。作者提出混合编码 Aether,针对格鲁吉亚语等 4 种语言建模。结果显示信息密集语言(中、韩)受益于压缩编码,而格鲁吉亚语等低信息量字符语言对编码选择不敏感。 研究表明文本编码应作为语言特定决策,而非通用默认标准。
该研究通过合成无上下文自由文法揭示Transformer学习内部-外部计算的分阶段动态。 模型先利用浅层Bigram局部信息,随后在中间层编码隐树变量以消除歧义,最后半层网络逐步优化Token预测。 这种计算结构与真实LLM研究结果相似,为理论研究提供了可解析的控制场景。
论文提出 SMCT 模型,通过单一固定长度整数序列识别大语言模型,51 类闭集测试准确率达 92.72%。 NumPrint 基准包含 51 个模型在 1 至 355 整数间生成的 5036 条响应;增加至 4 条响应时准确率升至 97.12%。 该研究为 API 实际响应模型与声明模型一致性的验证提供了有效方法。
一项基于 960 小时英语有声书语料的研究表明,在有限建模预算下,词是最优的语音编码单位。 该研究对比了音素、音节及多词组合的信息率,发现使用 n-gram 或 Transformer 模型时,词的信息率最低。 结果指出,大于音节但小于长词组的中间单元在有限算力下提供了最高效的信息表示。
研究证实用户话语可检测交互中的隐式不满,模型AUPRC超基线达15个百分点。 分析基于自报告不满标签,发现异常检测方法在变化检测中效果显著,已发表于LUHME 2026。
LLM 验证使最小对基准测试对语言模型更易通过。在 BLiMP 和 QFrBLiMP 数据集中,10 个开源大语言模型(LMs)在预注册 LLM 过滤器标记的项上比接受的项难 18.9 分,且所有 70 种 LM-验证器组合均显示标记项更难。该过滤去除了 LMs 失败但人类未失败的项目,使准确率提升超过随机去除。
提出基于多LLM基准的IFRS合规验证框架,构建含19,998条监管披露对的基准测试集。 集成分类器在分歧集上达到81.7%加权F1值,超出最强单LLM 10.4个百分点。 数据集、模型检查点及分类器实现将公开发布。
针对医疗大语言模型基准分数难以追溯临床证据的问题,研究团队发布了 Med Evidence Bench(MEB)。该基准包含 1,536 条医师构建题目,涵盖指南知识、标准化及真实临床场景。
Mobile AI Factory 是一个智能体系统,可为特定任务和手机构建微调、量化的小型语言模型(SLM)。 该系统在10项任务和4款Android手机上评估,其端侧模型在5项任务上超过两个五-shot前沿模型最多0.34,且比穷举训练节省19倍GPU时间。 代码已开源。
BioMem 研究提出 HMRU 框架,在生物医学问答与对话记忆基准上平均提升 8.6%。 该无训练框架同时增强证据可及性与任务感知利用,降低对话回答错误 24.9%。 HMRU 弥补了 48.0% 的全上下文推理性能差距,适用于临床预测等场景。
研究显示,更换概念定义比单纯改写措辞对 LLM 标注结果的影响更大。 该现象被称为“定义敏感性”,涉及六个概念与三款 LLM 的测试。 这表明 LLM 标注结果依赖于提示词中的定义,而非仅基于预训练知识。
针对大语言模型知识编辑中目标隐层状态构建影响容量分配的问题,提出一种基于 $\ell_1$ 正则化的稀疏目标优化方法。 该方法通过修剪知识向量的非必要“触须”分量,仅保留核心部分,降低单次编辑对其他知识的干扰。 实验验证了该方法在多个 LLM 和基准数据集上的有效性,并已开源代码供使用。
提出 TimeOmni-o1 模型,通过双向耦合预训练时序基础模型(TSFM)与大语言模型(LLM),实现同一架构对时序与文本的读取及生成。该模型利用 TSFM 压缩编码时序供 LLM 结合文本推理,并将 LLM 推理结果反馈给 TSFM 生成条件预测。模型在包含 50 万+ 样本的 12 领域多模态数据集 MMTR 上,优于单独使用的 LLM、TSFM 及其他专用时序模型。
研究提出证据锚定管线 SREE,用于从社交历史中推断抑郁问卷响应。 该模型在 eRisk 数据集上实现 70% 的召回精度提升,并减少 30% 以上检索量。 SREE 通过聚焦可归因证据,显著优于现有语义相似检索方法。
提出端到端框架 PlanAudio,无需中间预处理即可从非结构化自由文本直接生成统一的语音与声音混合音频。 该模型在单个自回归架构中集成潜在规划机制,先预测连续音频布局再生成声学 token,并构建了 Free-Form Unified Audio Generation Benchmark (FUAG) 评测集。
PaGeR 框架通过混合视角与全景图像训练,在单次前向传播中统一预测尺度不变深度、度量深度、表面法线及天空掩码。该策略保持底层预训练 Transformer 架构变更最小化,保留丰富的 3D 先验,实现了几何一致的 360 度场景重建。PaGeR 在室内外环境中表现出 SOTA 性能及优秀的零样本泛化能力,代码与模型已开源。
研究人员发布StakeBench评估框架,将560,876条评论与Polymarket及Manifold的市场数据挂钩,通过四组诊断任务测试模型对市场承诺的识别能力。
**summary_zh**: AI 廉价生成可信科学制品引发“认识论污染”风险,需通过重设制品级认识论基础设施,以前置生成成本换取更廉价的分布式验证。 核心提案“蓝图”将主张、证据等分解为类型化图组件,作为论文之外的结构化验证接口。 已构建概念验证原型,旨在解决当前论文中心系统因逻辑压缩导致的高验证成本问题。
KAIROS 是一种面向智能体 AI 服务的上下文感知功耗优化系统。它将智能体上下文作为首要控制信号,联合管理 GPU 频率、单实例并发及多实例请求分配,在降低功耗的同时避免内存抖动并维持性能目标。在软件和数据分析智能体任务评测中,KAIROS 平均实现 27% 的功耗降低(最高达 39.8%),且满足既定性能指标。
OmniReview 包含 202,756 条经核实的评审记录,并提出了 Pro-MMoE 框架。 该框架结合 LLM 语义画像与 Task-Adaptive MMoE 架构,在 7 项指标中的 6 项上取得了 SOTA 性能。 Pro-MMoE 为现实评审员推荐树立了新的基准,解决了嵌入方法的语义压缩瓶颈。
该论文提出首个自动化协同重命名的多智能体框架,通过Scope Inference、Planned Execution和Replication Agent协同工作,减少开发人员手动传播重命名变更的负担。 框架基于IDE受信重构API执行变更,前期研究分析了100个开源项目中609K次提交的实践,并调查了205名开发人员的需求。
论文提出 Pygmalion Effect in Vision 框架,通过图像到黏土翻译处理反射对象,利用 BRDF 反射分支与黏土引导分支共享几何但独立渲染的设计,在合成及真实数据集上同步提升几何与光度指标。 该框架引入“去光化”归纳偏置,将辐射度转化为中性指导,为反射对象几何学习提供无反射几何辅助,已被 NeurIPS 2026 接收。
提出基于图注意力的去中心化 Actor-Critic(GADC)方法,优化多无人机系统双目标:最大化服务覆盖为主,延长电池寿命为辅。 利用图注意力网络处理有限局部观测以降低环境状态维度,并采用 KL 散度因子平衡覆盖性能与电池寿命的权衡。 在理想设置及 NVIDIA Sionna 实时射线追踪环境中测试,GADC 相比 SOTA 方法表现更优,验证了其可扩展性与效率。
summary_zh: Messier 发布了一个包含 923,158 条记录的高分辨率语料库,覆盖 30 个基准、745 个智能体和 11,891 个任务。 该语料库统一了异构组件,研究发现前沿进展不均衡,编程领域改善最快,企业工作流最具挑战性。
TRACE 提出两阶段训练课程,解决参数化工具检索中知识遗忘与解码缓慢问题,支持实时生产部署。 Stage 1 用 LoRA 复现 ToolSense 的多格式记忆 SFT 以植入工具知识;Stage 2 引入思维链与业务规则数据,生成 JSON 工具列表前输出推理痕迹。
Forethought 提出一种神经符号推理系统,通过将符号与神经基元组合成类型化领域特定语言来构建可验证的推理程序,在四个标准工具调用基准测试中,端到端准确率中位数相比直接提示提升 32%。 该系统在设计与执行时检查输出契约,明确划分保证与测量边界;配合小型开放模型可匹配前沿模型性能,且移除契约与控制层会抹去大部分收益。 结果表明丰富的符号编排器有助于构建更准确、可靠且可审计的语言模型智能体。
Einstein World Models 提出一种 LLM 推理框架,允许模型在推理过程中调用世界模块生成视觉时间线滚动,以支持超越语言限制的反事实思考。 该框架将视觉输出视为可检验的假设而非直接答案,扩展了 LLM 的工具调用能力至视觉思维实验领域。
summary_zh: 研究显示让LLM自主决定赌注或设定盈利目标会显著放大类似病态赌博的非理性行为,目标设定效应使破产率加倍。在开放权重模型中,这种风险行为可通过决策时的内部状态在统计学层面恢复,且行为监控与内部状态监控提供了互补视角。
研究者提出结合学生-教师训练与 EM-DETR 框架,通过整合异构医疗图像数据集构建跨模态病灶检测基础模型,以缓解灾难性遗忘并提升泛化能力。 在胸片(CXR)中,该模型图像级 AUC 超先前 SOTA 1%,mAP50 比单数据集训练 EM-DETR 高 2-3 点,同样领先于乳腺影像组。 此方法为利用异构数据构建可扩展、高鲁棒性的医疗影像基础模型提供路径。
EngineAgent 通过层级感知引擎索引和预验证工作流,实现了跨层协调的端侧 LLM 模型启用。该系统在 12 项任务中,使用两种底层 LLM 均达到 75% 的端到端成功率,远超最强编码智能体基线的 33.3%,并降低了平均任务时间和 API 成本。
该研究提出合成训练数据设计准则,使离线训练的神经网络无需先验信息即可鲁棒估计新信道。 方法适用于高多普勒频移场景,实验表明在不同复杂度架构下,网络对未见功率延迟谱(PDP)均能实现泛化性能。
基于 TRACE 架构的 AI 助手实现草案立法反腐败风险评估。在 132 部乌克兰法案构成的基准测试中,使用 Gemma 4 31B 时前 10 项标记命中率为 0.28。系统通过确定性解析核心与 LLM 评估结合,未匹配 32 项法律冲突发现。
该研究提出LASER智能体,利用预期引导机制解决视频中物体状态读取问题。模型将预期变化转化为视觉问题,检视当前帧确定属性值,并校验状态记录。模型参数全程冻结,通过修订文本观察技能提升表现。 在OSCaR和PLM RCap数据集上,LASER相比基线实现一致性能提升。
研究者提出 ZoomGain 数据构建管线,利用视觉语言模型在全局图像与局部放大图像间的感知差距生成问题,仅需 9K 样本训练。 模型在 4B/9B 规模上通过该管线训练后,性能提升显著,在 HR-Bench 4K 等基准上达到 90.25 的 SOTA 成绩,超越部分千亿参数模型。 该方法为细粒度视觉监督评估与训练提供了实用基础,相关代码已开源。
APEX 利用条件移位扩展流式视频生成,移除独立假分数网络。 对比 S2-Avatar,APEX 指令遵循净偏好 +30.0%,峰值 GPU 显存降低 4.4%,平均迭代时间缩短 9.2%。
PASE 框架通过将可复用过程逻辑分离为可编辑程序,迭代进化 LLM Agent 技能。该框架在多个模型与基准上优于所有基线方法,实现超 2.8% 的提升。 分析表明,PASE 展现出更强的进化稳定性与泛化能力,凸显程序化知识在技能进化中的关键作用。数据与代码将通过 GitHub 开源发布。