arXiv · AI· Jianrui Zhang, Hyun Jung Lee, Sukanta Ganguly, Tae-Eui Kam, Donghyun Kim, Yong Jae Lee·· 12 小时前AI 评分41
SMART 框架解锁单向量模型的多向量能力以提升多模态检索
Your Embedding Model is SMARTer Than You Think
AI 导读
提出 SMART 框架,通过直接后期交互利用冻结的隐藏状态,将标准单向量模型升级为多向量检索器。该方案即插即用,在 MMEB-V2 基准上进一步提升了 SOTA 模型性能,且轻量级后训练能增强视觉文档检索效果。代码和权重已开源。
来源:arXiv · AI · arxiv.org