跳到正文
arXiv · ML· Nghia Nguyen, Tianjiao Ding, Lachlan Ewen MacDonald, Ren\'e Vidal·· 4 天前AI 评分21

CLIP 嵌入中分层概念结构的可证明跨模态转移

Provable Cross-Modal Transfer of Hierarchical Concept Structure in CLIP Embeddings

AI 导读

summary_zh: 研究人员定义了分层角分离(HAS)几何属性,解释 CLIP 嵌入中分层概念结构形成的原因。实验表明图像嵌入在随机初始化即近似满足 HAS,而文本嵌入需经对比学习后才满足。

来源:arXiv · ML · arxiv.org