跳到正文
arXiv · ML· Bora Kargi, Arnas Uselis, Seong Joon Oh·· 2026-10-21AI 评分26

CLIP 风格双编码器易受“半真理”干扰,CS-CLIP 通过组件监督提升检索准确性

Half-Truths Break Similarity-Based Retrieval

AI 导读

CLIP 风格双编码器在文本描述中混入错误细节时,相似度分数可能反升,CO CO 上正确短描述仅被偏好 40.6%。 研究者提出 CS-CLIP,将字幕分解为实体和关系单元,通过微调使模型对正确单元的评分高于错误对比项。 CS-CLIP 将半真理准确率提升至 69.3%,并在组合性基准测试平均性能上提高 5.7 分,代码已开源。

来源:arXiv · ML · arxiv.org