跳到正文
11月17日周二
  1. arXiv · AI37

    GEM-MM:通过熵引导偏好对齐减少 VLM 幻觉

    GEM-MM 通过熵引导偏好对齐减少视觉语言模型(VLM)幻觉,基于 Qwen3-VL-4B-Instruct 在 3000 个提示预算下取得最佳熵深度偏好分数 61.7%。 方法采用组归一化策略梯度,奖励高熵推理分叉并惩罚不确定答案,将 AMBER 幻觉率从 23.4-24.0 降至 20.6。 代码与评估框架已开源,统计显著性检验 p 值小于 0.001,确认了主要消融实验结果。

  2. arXiv · ML40

    LogT:通过逻辑链引导的SFT数据引擎提升视觉搜索推理

    该研究提出自动化SFT数据引擎LogT,通过强制逻辑链引导生成高质量训练数据,解决视觉搜索中逻辑推理与工具使用挑战。 在Qwen2.5-VL-7B和InternVL3.5-8B上验证,LogT-SFT仅用3.1倍更少的数据和120倍以上更少的GPU小时,超越SFT和RL训练的SOTA模型。 应用简单RL配方后,模型性能比复杂RL设置方法高出9.59分,并展现出更高工具使用准确性与结构化推理轨迹。

  3. arXiv · AI33

    NI-ACT:面向脑-具身操作的神经常驻意图接口

    NI-ACT框架将皮层信号解读为持续意图以驱动机器人抓取,在反事实任务中意图替换改变了抓取行为。 将群体潜在变量作为意图token使抓取完成率从69%升至81%,PMd区域读取效果优于M1(77% vs 53%)。 证明神经信号的表征方式及读取时空位置共同决定了向具身智能体传达运动目标的有效性。

  4. arXiv · AI20

    Mem2Fair:基于公平记忆的文本到视频生成在线公平性控制框架

    论文提出 Mem2Fair,一种即插即用的框架,通过维护概念条件化的公平记忆在推理时提升文本到视频(T2V)生成的公平性。 该框架利用生成视频作为反馈,基于属性干预选择提示词,无需模型训练或独立部署前采样,可在多个属性、提示设置和目标分布上持续改善公平性,并保持与未修改生成器相当的提示-视频对齐和视频质量,同时支持在商业黑盒 T2V 模型上运行。

  5. arXiv · ML35

    Qwen3.5-27B 能否在上下文中调优聚类算法

    Qwen3.5-27B 在 5 个合成聚类场景中表现良好,其智能体循环产生的 silhouette 分数接近网格搜索,但迭代次数大幅减少。 实验分为三步:区分最优聚类、为可视化结果打分,以及通过 VLM 调整 k-means 超参数。 研究证实 VLM 视觉反馈可自动调优聚类算法,但在噪声和模糊设置中表现挣扎。

  6. arXiv · ML38

    预训练多模态模型在数据稀缺下的心理治疗结果预测研究

    针对小样本临床数据,冻结预训练多模态嵌入结合统计池化和经典模型在9项量表平均$r=.406$,显著优于深度学习。 具体实验使用106个会话和88名患者数据,症状困扰量表$r$达$.490$,而优化后的单阶段深度模型仅$.222$。 该结果建议在数据稀缺场景下避免学习聚合方法,采用固定统计池化以提升预测可靠性。

  7. arXiv · NLP23

    零训练 LLM+OVOD 管线中 CAAP-SNAP 归因差异的细粒度分析

    零训练 LLM+OVOD 管线中 CAAP 与 SNAP 的显著差异主要源于词汇新颖度,当 LLM 用词超出检测器原生类别时定位准确率从 80.9% 降至 31.6%。78-88% 看似定位失败实为模型正确找到 COCO 未标注的真实物体,而非幻觉。该发现表明需重新评估基于开放世界的多模态系统失败模式与检测幻觉方法。

  8. arXiv · NLP35

    MindTopo:基础模型能否在拓扑空间中推理?

    MindTopo 基准测试涵盖连续性、分离、顺序、封闭及拓扑结五个维度,包含3900个核心实例。 针对13个多模态大语言模型评估显示,模型在推理任务中表现优于规划,但在简单层级上仍落后于人类。 该测试揭示基础模型在闭环智能体规划及视频生成校验中仍存在显著局限。

  9. arXiv · NLP39

    HEED: 密度加权残差对齐用于混合视觉-语言模型蒸馏

    HEED通过密度加权残差对齐解决混合架构蒸馏中细粒度文本丢失问题,将Qwen3-VL-8B-Instruct蒸馏为3:1 Mamba-2/attention混合模型。 该方法利用patch自相似性作为位置重要性代理,无需额外训练,在OCR Bench v2上提升8.7分,10项基准平均分提升5.13分。 不增加参数或推理成本,保留混合架构4.12倍吞吐量及128k上下文68%内存节省优势。

  10. arXiv · NLP24

    LatentRouter: 能否在看到答案前选择合适多模态大模型?

    LatentRouter 提出基于反事实多模态效用预测的路由框架,在 MMR-Bench 和 VL-RouterBench 上优于固定模型、特征级及学习型路由基线。 该方法通过提取多模态路由胶囊,用模型能力 token 表征候选 MLLM,并以潜层交互估计各模型表现,支持性能与成本导向的路由策略。 代码已开源。

  11. arXiv · NLP42

    多模态专家混合模型中的“看见但不思考”:路由分心现象分析

    研究者揭示多模态专家混合模型存在“看见但不思考”现象,即模型能准确感知图像内容,却在后续推理中失败,而纯文本场景下能正确解题。 分析发现视觉专家与领域专家存在层级分离,图像输入在中层诱导了显著的路由偏差,导致任务相关的推理专家未能充分激活。 通过设计路由引导干预方法增强领域专家激活,在六个基准测试中取得一致提升,复杂视觉推理任务最高提升3.17%。

  12. arXiv · NLP26

    基于原子概念编辑的模型行为解释与控制框架

    该研究提出一种黑盒可解释性框架,通过原子概念编辑学习可验证宪法,从而解释和控制模型行为。在数学推理任务中,干扰变量使 GPT-5 易混淆,但对 Gemini 2.5 和 o4-mini 影响有限;在文生图任务中,GPT-Image 侧重语法合规,Imagen 4 则优先氛围一致性。使用学习得到的宪法控制模型行为,成功率平均提升 1.86 倍。代码已开源。

  13. arXiv · NLP21

    IndicQE-APE:面向印度语言质量估计与自动后期编辑的整合基准

    IndicQE-APE 基准整合了 WMT 2020-2024 任务资源,包含 9 个方向对的 126,754 个实例,涵盖 4 种标签类型。 该基准在段落级质量估计上评测了 6 个 LLM 和 3 个 COMET 指标,在自动后期编辑上评测了 3 个系统。 研究发现 4-shot 提示法会损害所有 3.4B 及以下规模模型的输出合规性与相关性。 ```

  14. arXiv · NLP21

    临床视觉问答模型不确定性估计并非安全网,但可预判模型失效

    对12个VLM的8种UE方法基准测试发现,UE质量随模型准确率下降而恶化,无法在模型最薄弱处提供可靠信号。在NOTA扰动测试中,模型准确率崩塌但不确定性几乎不变,导致系统性失准。未扰动输入下的不确定性仍能可靠预判哪些预测在扰动下会失效,证明UE具备诊断模型脆弱性的价值。

  15. arXiv · NLP33

    JuICE:评估 LLM-Judge 识别文化错误基准

    JuICE 是用于评估 LLM-Judge 识别文化错误的多语言基准,包含 7470 个错误片段标注和 1050 个查询响应对。 覆盖美、韩、印尼、孟加拉四国,使用英语及当地主要语言,涉及长篇 LLM 响应中的文化与语言错误。 最强 LLM-judge 在错误片段检测任务中 F1 仅为 0.51,且持续遗漏本地居民易识别的深层文化错误。

  16. arXiv · NLP30

    模糊指纹编码器预训练语言模型用于对话情感识别:人类评估与有效性研究

    针对标准预训练语言模型在对话情感识别中缺乏可解释性且易将少数类误判为中性类的问题,研究者结合模糊指纹技术提出了解释性方法。该方法通过模糊相似函数匹配情感原型,实验显示减少了中性类过度分类,并获人类评估支持,在达到最先进水平的同时揭示了分类过程。

  17. arXiv · NLP21

    孟加拉语文本到手语标注(Gloss)翻译数据集与基准发布:包含 1,000 条人工标注及 4,000 条合成数据

    该工作构建了首个公开的孟加拉语文本到 Gloss 翻译数据集,包含 1,000 条人工标注、4,000 条合成数据及 159 条测试对。 实验对比了微调开源模型与 GPT-5.4,GPT-5.4 自动指标得分最高,但较小的开源模型表现也具有竞争力。 这证明了系统性生成的合成数据在解决低资源手语翻译挑战中的有效性。

  18. arXiv · NLP32

    3D-MoE 采用 MoE 架构提升空间智能

    3D-MoE 发布,这是一款采用混合专家架构的 3D 视觉语言模型,旨在解决空间智能任务中密集 Transformer 的高计算成本。 其核心创新包含模态与空间上下文感知的概率路由方案,并集成了基于扩散的 Pose-DiT 动作头,实现单步生成 6D 位姿动作。 该模型在减少激活参数量的同时实现了机器人操作任务的实时推理,代码已开源。

  19. arXiv · NLP29

    大语言模型的多语言幻觉差距研究

    研究发现 LLaMA、Qwen 和 Aya 模型在 19 种语言生成传记时存在幻觉率差异,高资源与低资源语言间差距显著。 研究通过扩展 FactScore 指标至多语言场景进行量化,并将生成结果与 Wikipedia 页面进行对比以评估准确性。 该成果已被 PMLR 会议接受,揭示了 LLM 多语言性能及幻觉评估面临的挑战。

  20. arXiv · NLP40

    Qwen3-VL 如何规划视觉语言模型的多步任务

    研究揭示 Qwen3-VL 通过绑定头、光标信号、选择步骤和注视头四部分机制规划视觉回答顺序,该机制在 2B 至 32B 模型中均成立。 因果干预验证显示该机制适用于不同输入格式、自然照片及多种语言,binding、relay 和 gaze 头存在于所有测试模型尺寸中。 此发现为研究模型在长程多步任务中的规划过程提供了新路径。

  21. arXiv · NLP21

    基于会话AI的四语种代码切换研究

    预注册研究测试了42名大学生与聊天机器人的对话,发现英语占主导,而在文化话题中,低资源语言Papiamentu/o和西班牙语的使用占比从15%上升至24%。 参与者极少在同一条消息中混合多种语言,且自报对AI的语言切换舒适度不亚于与人交流。 这表明会话AI需要适应逐轮次的语言变化,并优化对本地低资源语言的处理。

  22. arXiv · NLP20

    结构感知引导对齐(SAGA)改进分子语言模型中的神经分子表征

    研究者提出仅用于训练的SAGA正则化器,利用居中控核对齐将神经分子表征与指纹Tanimoto相似度对齐,且不增加参数或需推理时使用指纹。 该研究基于MolCA和Atomas模型进行验证,SAGA提升了分子-文本检索性能,使非精确检索偏向更接近的结构类似物,并提高了骨架分割属性预测的平均表现。 结果证实,既有的化学信息学先验知识可增强分子语言模型表征的化学真实性,同时保留其多模态效用。