Jianrui Zhang团队发布SMART框架提升多模态检索

2026年10月20日，Jianrui Zhang等人在arXiv上提出SMART多模态检索框架。该方案通过直接后期交互利用冻结隐藏状态，将标准单向量模型升级为多向量检索器，实现即插即用。 SMART专注于稠密检索，其性能增益集中在细粒度任务和视觉文档检索中，在分类等全局任务上与基准持平。该方案以额外的每词元索引存储换取性能提升，且轻量级后训练可进一步节约时间与计算资源。 目前，该框架在MMEB-V2基准上提升了SOTA模型性能，使单向量模型能与最先进多向量模型竞争。作者已开源相关代码与模型权重。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。