跳到正文
11月17日周二
  1. arXiv · AI26

    OrganLens 实现 CT 基础模型的器官特异性表征学习

    OrganLens 通过自监督学习实现 CT 基础模型的器官特异性表征,利用共享编码器和器官身份条件生成 11 个器官特定表示。 该模型在 CT-RATE 上将心脏扩大 AUROC 从 0.917 提升至 0.953,在 NLST 上改善肺癌、呼吸和 COPD 死亡率的 Harrell C-index。 它提供了研究跨队列器官特异性疾病的可扩展框架。

  2. arXiv · AI32

    Orbis 2:一种用于驾驶的分层世界模型

    Orbis 2 提出了一种分层驾驶世界模型,通过解耦高阶预测器和低层生成器,实现了高级别感知保真度与强大的空间语义表示。 该模型采用扩散强制预训练和教师强制微调的两阶段训练范式,在驾驶世界模型的标准基准测试中取得了最先进的结果。 Orbis 2 已被 NeurIPS 2026 接收,项目页面提供了代码、演示和检查点。

  3. arXiv · AI22

    语义概念空间中的可解释新颖类别发现 xNCD 框架

    提出可解释新颖类别发现框架 xNCD,通过视觉-语言先验对齐在语义概念空间执行发现与伪标签分配。 xNCD 在 CIFAR-10 取得 92.63% 准确率,在 CIFAR-100 将准确率从 73.2% 提升至 76.45%,并唯一提供人类可读的集群与实例级解释。 该设计通过语义概念瓶颈限制了假设类,使发现的类别具备内在可解释性。

  4. arXiv · AI22

    FundusGround:基于空间定位病变证据的临床医学可解释眼科 VQA 基准

    研究团队发布眼科视觉问答(VQA)基准 FundusGround,包含 10,719 张眼底图像、15,595 个病变标注及 72,706 个问答对。 该基准利用 ETDRS 网格对病变进行空间定位,映射至 9 个临床视网膜区域,支持四类问答格式。 实验表明,引入病变级视觉证据能提升通用及医疗视觉语言模型的性能与透明度,证实了空间定位在可解释眼科 VQA 中的必要性。

  5. arXiv · AI36

    CLP-DD:面向预训练视觉模型的闭式线性探针数据蒸馏方法

    CLP-DD提出了一种针对冻结预训练编码器的闭式线性探针数据蒸馏方法,通过样本空间核岭回归求解器替代传统的轨迹匹配或NTK近似。 该方法在ImageNet-100上显著优于LGM(无DSA),在ImageNet-1K上性能持平或超越LGM(含DSA),且速度提升14倍,GPU内存占用降至1/8以下。 代码已开源,相关研究被NeurIPS 2026收录。

  6. arXiv · AI23

    理解监督如何指导统一多模态模型的视觉生成

    研究提出轻量级框架 UNO,通过理解导向后训练将语义摘要和视觉回归作为监督信号,指导统一多模态模型的生成表示。 实验表明该方法实现了从理解到生成的有效梯度流动,在图像生成与编辑任务中验证了理解作为生成催化剂的有效性。 该工作已被 NeurIPS 2026 接收。

  7. arXiv · AI29

    Project Imaging-X:面向基础模型开发的1000+开放获取医学影像数据集综述

    研究团队发布了迄今最大规模的医学影像数据集综述,系统梳理了1000多个开放获取数据集。该工作指出现有数据集规模有限且碎片化,并提出了元数据驱动的融合范式(MDFP)以整合共享模态或任务的数据。团队同步发布了一个交互式发现门户和统一结构化表格,旨在加速数据发现,支持构建更强大的医学基础模型。

  8. arXiv · AI34

    VIOLA:实现极简标注视频上下文学习的标签高效框架

    VIOLA 提出了一种结合最小专家监督与大量无标签数据的标签高效框架,旨在解决多模态大语言模型在稀缺标注数据下的泛化难题。 通过引入密度不确定性加权采样、混合池构建以及置信度感知检索与提示机制,该框架在九种基准测试中显著优于各类基线模型。 此研究证明了在低成本标注场景下实现稳健适应的可能性,相关成果已被 WACV 2027 接收。

  9. arXiv · AI23

    SEPS: 面向细粒度跨模态对齐的语义增强补丁精简框架

    提出 SEPS 框架以解决视觉与语言跨模态对齐中的补丁冗余和歧义问题,在 Flickr30K 和 MS-COCO 数据集上取得 23%-86% 的 rSum 性能提升。 该框架采用两阶段机制整合密集与稀疏文本的语义,并利用均值计算的相关性感知选择来突出关键补丁-词对应。 SEPS 已被 ICML 2026 录用,相关实现代码已在 GitHub 上公开。

  10. arXiv · ML28

    RELAY:支持少导联零样本迁移的 700 万参数 ECG 基础模型

    研究发布 700 万参数 ECG 基础模型 RELAY,在真实点-of-care 数据集上零样本 AUROC 达 87.6% 和 81.5%,优于现有 12 导联模型。 模型通过图结构表示任意导联片段,在 29 项基准测试中,单导联和双导联随机设定下分别排名第一,且在 26 项和 22 项任务中表现最佳。 ECG 基础模型应在所有采集设置下评估,而非仅依赖 12 导联基准。

  11. arXiv · AI28

    EDVD-LLaMA:基于多模态大语言模型推理的可解释深度伪造视频检测

    研究人员提出 EDVD-LLaMA 框架,通过可解释推理提升深度伪造视频检测的准确性与泛化能力。 该框架结合时空细微信息标记化(ST-SIT)与细粒度多模态思维链(Fg-MCoT),实现像素级时空定位并抑制模型幻觉。 研究还构建了可解释推理 FF++ 基准数据集(ER-FF++set),在跨伪造方法和跨数据集场景中展现出优于传统检测方法的鲁棒性。

  12. arXiv · AI31

    RenalCLIP:用于肾癌精准肿瘤学的疾病中心视觉-语言基础模型

    研究人员开发了肾癌视觉-语言基础模型 RenalCLIP,旨在通过无创评估提升诊断精度。 该模型利用 27,866 例 CT 扫描数据,采用两阶段预训练策略,在十个核心临床任务上性能显著超越通用模型,且仅用 20% 数据即达基线峰值表现。 RenalCLIP 展现出强大的零样本诊断能力,有助于优化肾实质的预后分层与个性化治疗管理。

  13. arXiv · ML33

    脑机接口中运动想象分布外检测的挑战

    研究指出,由于 EEG 信号固有变异性高,许多在常规机器学习领域有效的分布外(OOD)检测方法在运动想象脑机接口中失效,常导致模型对陌生类别做出盲目猜测。 Deep Ensemble 和 MC-Dropout 模型实现了任务内 AUROC > 0.9,且 OOD 检测能力可达 0.7;该研究提出了首个针对运动想象脑机接口的分布外检测基准。

  14. arXiv · AI26

    BioSync:用于多模态可穿戴数字生物标志物的 Transformer 融合架构

    BioSync 提出紧凑型 Transformer 跨模态融合架构,参数仅 1,119,INT8 量化后内存占用 1.3 kB。 该模型在 11 种合成生理机制和 5 个真实数据集上测试,最坏情况遗憾值为 0.034,优于 0.048-0.107 的基线。 研究实证了紧凑 Transformer 融合在连续可穿戴部署中的优势及简单基线仍具竞争力的场景。

  15. arXiv · AI20

    CLIP 在区域地理定位中的视觉线索与场景构型研究

    研究发现,针对洛杉矶街景数据,编码器适配将区域地理定位准确率从 39.03% 提升至 75.94%-82.10%,显著优于冻结编码器。 实验显示,适配模型对场景构型扰动更敏感,预测切换率高达 42.92%-45.56%,而冻结方法仅为 10.79%-14.60%。 结果表明,编码器适配改善了邻近区域判别能力,且预测并非仅依赖粗粒度结构。

  16. arXiv · AI33

    CADENCE 框架:从 ECG 基础模型中提取可解释的神经生理概念

    CADENCE 利用 BatchTopK 稀疏自编码器将超过 900 万个 ECG token 的 Layer-6 嵌入分解为 8,192 个稀疏心脏原子。 这些原子在临床表型和波形形态上的平均 AUROC 分别为 0.88 和 0.90,显著优于密集维度的 0.78 和 0.83。 该框架提供可扩展方法,用于发现并审计 ECG 基础模型中编码的生理知识。

  17. arXiv · AI23

    基于开源 Wan 模型的生成视频注意力图:作为可解释性与创造性素材的研究

    该研究提出提取并可视化生成视频模型中交叉注意力图的方法,基于开源 Wan 模型构建工具,以解读文本到视频生成中的时空注意力行为。 通过探索性探测和艺术案例研究,验证注意力图作为分析工具及原始艺术素材的潜力,拓展可解释 AI 在艺术领域(XAIxArts)的应用边界。

  18. arXiv · ML38

    DoF-Query Transformer 实现第一人称视觉与前臂 HD-sEMG 自适应融合以连续追踪手部运动

    该多模态框架融合第一人称 RGB 图像与 128 通道前臂 HD-sEMG,实现 20 个手指关节角度的连续回归。 视觉编码器与 EMG 编码器配合 DoF 查询 Transformer 解码器,为每个自由度分配独立可学习查询,实现自适应融合。 融合模型平均 R² 达 0.88,MAE 为 2.80°,优于单模态基线,并在视觉遮挡场景下展现更强鲁棒性。

  19. arXiv · AI27

    紧凑视觉潜变量在超高分辨率遥感中保留局部证据的研究

    在超高分辨率遥感问答任务中,将裁剪图像编码为64个token的紧凑视觉潜变量记忆,实现了7.6至9.9倍的裁剪token压缩。 该记忆策略使Qwen-VL在LRS-GRO基准上的准确率提升2.5至4.8个百分点,替换其他图像记忆会导致准确率下降5.8至7.4个百分点。 研究证实紧凑视觉潜变量能有效保留局部证据,且证据可用性是其贡献的关键决定因素。

  20. arXiv · AI29

    VODA:面向3D高斯分割的体积监督目标

    VODA 提出一种即插即用的体积监督目标,通过利用局部深度结构直接监督所有高斯,解决了现有渲染视图训练因 alpha 混合导致的 3D 选择不完整问题。 该方法在 Removal-3D 基准测试中一致改善了体积分割效果,并在 LERF 和 ScanNet 上保持或提升性能,成功恢复了低贡献高斯。

  21. arXiv · ML27

    PlanDiv:通过潜在计划实现视觉语言动作模型测试时缩放

    提出 PlanDiv 动作头,利用潜在计划假设提升视觉语言动作模型测试时缩放效果。 轻量级规划器提出 K 个潜在计划假设,共享掩码扩散执行器解码动作块;仅在演示数据上训练,无需计划标签或奖励。 在 CALVIN ABC→D 五任务链上成功率从 56.9% 提升至 69.9%,LIBERO-Long 上 4 个计划消除 40% 单候选失败案例。

  22. arXiv · ML23

    KneeFS-Net: 一种用于膝关节骨关节炎严重度评估的轻量级深度学习模型

    KneeFS-Net 是一种仅含 0.8M 参数的轻量级模型,在 OAI 测试集上 QWK 达 0.863。 模型在跨人群验证中无需额外训练,单中心医院队列 MAE 为 0.339,多中心远程影像队列为 0.522。 自监督预训练加微调后,交叉验证 QWK 提升至 0.823,证明其可在标注有限的新人群中进行有效适配。

  23. arXiv · AI21

    FM-Recon 框架利用预训练基础模型特征加速心脏电影 MRI 重建

    该研究提出 FM-Recon 框架,将预训练基础模型的冻结图像编码器特征集成至反卷积重建网络,用于加速心脏电影 MRI 重建。 基于 CMRxRecon2023 数据集的实验表明,这种集成方法在中等加速因子下,能有效从含伪影的输入中提取信息表示,从而提升重建性能。 研究证明了基础模型特征在加速 MRI 重建中的应用潜力,并为将其有效整合到反卷积网络中提供了见解。