arXiv · ML· Taehoon Kim, Wonjun Hwang, Hyunsouk Cho·· 5 小时前AI 评分29
桥接 CLIP 与 DINO：面向在线测试时适应的跨模态信息最大化
Bridging CLIP with DINO: Cross-Modal Information Maximization for Online Test-Time Adaptation
AI 导读
针对视觉-语言模型在测试时腐蚀下的模态偏差问题，提出名为 CDIM 的在线测试时适应方法，优于对比的 CLIP 基线。 方法整合冻结自监督骨干（如 DINO v2）与 CLIP，通过交叉协方差 logit 集成及门控信息最大化目标，在 ImageNet-C 等数据集上表现更优，代码已开源。
来源：arXiv · ML · arxiv.org