跳到正文
11月11日周三
  1. arXiv · NLP28

    线性时间 Minimum Bayes Risk 解码方法

    Minimum Bayes Risk(MBR)解码通过参考聚合将效用估算复杂度从 O(n^2) 降低至 O(n)。 该方法利用聚合参考表示近似成对指标分数,在保持 MBR 质量增益的同时提升效率,开源代码已发布。 该研究发表于 ACL 2024,v3 版本包含 ChrF 指标更精确的时间测量。

  2. arXiv · NLP42

    Walrus 8B 统一语音与音频基础模型技术报告

    Walrus 是一个基于 Gemma 4 初始化的 8B 统一语音与音频基础模型,支持 ASR、翻译、TTS 等 20 多项任务及 100 种语言。 该模型采用数据为中心的训练策略,通过三阶段课程学习平衡不同任务,预测低比特率离散语音 token 并由轻量解码器转波形。 在多数多语言、多说话人基准上领先同级开源模型及专用模型,性能匹配或超越 4 倍大小的 Qwen3-Omni。

  3. arXiv · NLP28

    TERM:通过熵引导残差调制实现无目标越狱防御

    针对LLM越狱攻击,本文提出TERM无目标熵引导残差调制方法。该方法在推理时利用提示词校准的注意力熵偏差,自适应调整模型自身残差更新,避免了预定义安全方向。 在Llama、Qwen和Gemma模型上,TERM在7种越狱攻击和2个过度拒绝基准测试中提升了鲁棒性,且保持低过度拒绝率,具有适中的推理开销。

  4. arXiv · NLP23

    文本编码对语言模型的影响:基于 Aether 框架的研究

    UTF-8 编码因其变长设计引入跨语言不平等,其影响研究不足。作者提出混合编码 Aether,针对格鲁吉亚语等 4 种语言建模。结果显示信息密集语言(中、韩)受益于压缩编码,而格鲁吉亚语等低信息量字符语言对编码选择不敏感。 研究表明文本编码应作为语言特定决策,而非通用默认标准。

  5. arXiv · NLP25

    单一序列足以识别模型:基于定长整数序列的大语言模型指纹识别

    论文提出 SMCT 模型,通过单一固定长度整数序列识别大语言模型,51 类闭集测试准确率达 92.72%。 NumPrint 基准包含 51 个模型在 1 至 355 整数间生成的 5036 条响应;增加至 4 条响应时准确率升至 97.12%。 该研究为 API 实际响应模型与声明模型一致性的验证提供了有效方法。

  6. arXiv · NLP21

    语音编码信息率研究:词元比音素和音节更优

    一项基于 960 小时英语有声书语料的研究表明,在有限建模预算下,词是最优的语音编码单位。 该研究对比了音素、音节及多词组合的信息率,发现使用 n-gram 或 Transformer 模型时,词的信息率最低。 结果指出,大于音节但小于长词组的中间单元在有限算力下提供了最高效的信息表示。

  7. arXiv · NLP33

    LLM 验证使最小对基准测试对语言模型更易通过

    LLM 验证使最小对基准测试对语言模型更易通过。在 BLiMP 和 QFrBLiMP 数据集中,10 个开源大语言模型(LMs)在预注册 LLM 过滤器标记的项上比接受的项难 18.9 分,且所有 70 种 LM-验证器组合均显示标记项更难。该过滤去除了 LMs 失败但人类未失败的项目,使准确率提升超过随机去除。

  8. arXiv · NLP22

    LLM 知识编辑中源头容量分配:稀疏目标优化方法

    针对大语言模型知识编辑中目标隐层状态构建影响容量分配的问题,提出一种基于 $\ell_1$ 正则化的稀疏目标优化方法。 该方法通过修剪知识向量的非必要“触须”分量,仅保留核心部分,降低单次编辑对其他知识的干扰。 实验验证了该方法在多个 LLM 和基准数据集上的有效性,并已开源代码供使用。

  9. arXiv · NLP40

    TimeOmni-o1:双向耦合时序基础模型与 LLM 的多模态推理与预测

    提出 TimeOmni-o1 模型,通过双向耦合预训练时序基础模型(TSFM)与大语言模型(LLM),实现同一架构对时序与文本的读取及生成。该模型利用 TSFM 压缩编码时序供 LLM 结合文本推理,并将 LLM 推理结果反馈给 TSFM 生成条件预测。模型在包含 50 万+ 样本的 12 领域多模态数据集 MMTR 上,优于单独使用的 LLM、TSFM 及其他专用时序模型。

  10. arXiv · AI23

    PaGeR 框架实现统一全景几何估计

    PaGeR 框架通过混合视角与全景图像训练,在单次前向传播中统一预测尺度不变深度、度量深度、表面法线及天空掩码。该策略保持底层预训练 Transformer 架构变更最小化,保留丰富的 3D 先验,实现了几何一致的 360 度场景重建。PaGeR 在室内外环境中表现出 SOTA 性能及优秀的零样本泛化能力,代码与模型已开源。

  11. arXiv · AI38

    **title_zh**: AI 时代科学认识论基础设施:重构生成与验证成本平衡及蓝图概念验证

    **summary_zh**: AI 廉价生成可信科学制品引发“认识论污染”风险,需通过重设制品级认识论基础设施,以前置生成成本换取更廉价的分布式验证。 核心提案“蓝图”将主张、证据等分解为类型化图组件,作为论文之外的结构化验证接口。 已构建概念验证原型,旨在解决当前论文中心系统因逻辑压缩导致的高验证成本问题。

  12. arXiv · AI35

    KAIROS:面向智能体推理的状态感知、上下文感知低功耗服务系统

    KAIROS 是一种面向智能体 AI 服务的上下文感知功耗优化系统。它将智能体上下文作为首要控制信号,联合管理 GPU 频率、单实例并发及多实例请求分配,在降低功耗的同时避免内存抖动并维持性能目标。在软件和数据分析智能体任务评测中,KAIROS 平均实现 27% 的功耗降低(最高达 39.8%),且满足既定性能指标。

  13. arXiv · AI28

    多智能体协同重命名重构框架

    该论文提出首个自动化协同重命名的多智能体框架,通过Scope Inference、Planned Execution和Replication Agent协同工作,减少开发人员手动传播重命名变更的负担。 框架基于IDE受信重构API执行变更,前期研究分析了100个开源项目中609K次提交的实践,并调查了205名开发人员的需求。

  14. arXiv · AI25

    Pygmalion Effect in Vision:通过图像到黏土转换实现反射几何重建

    论文提出 Pygmalion Effect in Vision 框架,通过图像到黏土翻译处理反射对象,利用 BRDF 反射分支与黏土引导分支共享几何但独立渲染的设计,在合成及真实数据集上同步提升几何与光度指标。 该框架引入“去光化”归纳偏置,将辐射度转化为中性指导,为反射对象几何学习提供无反射几何辅助,已被 NeurIPS 2026 接收。

  15. arXiv · AI26

    基于图注意力的去中心化 Actor-Critic 用于多无人机网络双目标控制

    提出基于图注意力的去中心化 Actor-Critic(GADC)方法,优化多无人机系统双目标:最大化服务覆盖为主,延长电池寿命为辅。 利用图注意力网络处理有限局部观测以降低环境状态维度,并采用 KL 散度因子平衡覆盖性能与电池寿命的权衡。 在理想设置及 NVIDIA Sionna 实时射线追踪环境中测试,GADC 相比 SOTA 方法表现更优,验证了其可扩展性与效率。

  16. arXiv · AI25

    Forethought:基于神经符号基元编程的可验证推理系统

    Forethought 提出一种神经符号推理系统,通过将符号与神经基元组合成类型化领域特定语言来构建可验证的推理程序,在四个标准工具调用基准测试中,端到端准确率中位数相比直接提示提升 32%。 该系统在设计与执行时检查输出契约,明确划分保证与测量边界;配合小型开放模型可匹配前沿模型性能,且移除契约与控制层会抹去大部分收益。 结果表明丰富的符号编排器有助于构建更准确、可靠且可审计的语言模型智能体。

  17. arXiv · AI45

    大语言模型会发展出赌博成瘾吗?

    summary_zh: 研究显示让LLM自主决定赌注或设定盈利目标会显著放大类似病态赌博的非理性行为,目标设定效应使破产率加倍。在开放权重模型中,这种风险行为可通过决策时的内部状态在统计学层面恢复,且行为监控与内部状态监控提供了互补视角。

  18. arXiv · AI23

    基于 EM-DETR 示例接地构建跨模态医疗病灶检测基础模型

    研究者提出结合学生-教师训练与 EM-DETR 框架,通过整合异构医疗图像数据集构建跨模态病灶检测基础模型,以缓解灾难性遗忘并提升泛化能力。 在胸片(CXR)中,该模型图像级 AUC 超先前 SOTA 1%,mAP50 比单数据集训练 EM-DETR 高 2-3 点,同样领先于乳腺影像组。 此方法为利用异构数据构建可扩展、高鲁棒性的医疗影像基础模型提供路径。

  19. arXiv · AI28

    LASER:基于预期的视频物体状态读取智能体

    该研究提出LASER智能体,利用预期引导机制解决视频中物体状态读取问题。模型将预期变化转化为视觉问题,检视当前帧确定属性值,并校验状态记录。模型参数全程冻结,通过修订文本观察技能提升表现。 在OSCaR和PLM RCap数据集上,LASER相比基线实现一致性能提升。

  20. arXiv · AI38

    ZoomGain: 挖掘全局到局部感知差距构建细粒度视觉监督

    研究者提出 ZoomGain 数据构建管线,利用视觉语言模型在全局图像与局部放大图像间的感知差距生成问题,仅需 9K 样本训练。 模型在 4B/9B 规模上通过该管线训练后,性能提升显著,在 HR-Bench 4K 等基准上达到 90.25 的 SOTA 成绩,超越部分千亿参数模型。 该方法为细粒度视觉监督评估与训练提供了实用基础,相关代码已开源。

  21. arXiv · AI28

    PASE 框架:结合可执行程序实现 LLM Agent 技能进化

    PASE 框架通过将可复用过程逻辑分离为可编辑程序,迭代进化 LLM Agent 技能。该框架在多个模型与基准上优于所有基线方法,实现超 2.8% 的提升。 分析表明,PASE 展现出更强的进化稳定性与泛化能力,凸显程序化知识在技能进化中的关键作用。数据与代码将通过 GitHub 开源发布。