arXiv · AI· Qiyu Wu, Shuyang Cui, Satoshi Hayakawa, Wei-Yao Wang, Hiromi Wakaki, Yuki Mitsufuji·· 2026-10-06AI 评分22
MCA:面向鲁棒组合多模态检索的模态组合感知框架
MCA: Modality Composition Awareness for Robust Composed Multimodal Retrieval
AI 导读
研究者提出 MCA(模态组合感知)框架,用于解决 MLLM 统一编码器在组合多模态检索中因模态捷径导致的分布偏移鲁棒性问题。 该框架包含偏好损失与组合正则化目标,前者要求多模态嵌入优于单模态嵌入,后者将多模态嵌入与其单模态部分构成的原型对齐,显式建模组合表示与单模态对应物之间的结构关系。 在多个基准上的实验显示,MCA 提升了分布外检索性能,论文已被 EMNLP 2026 主会接收。
来源:arXiv · AI · arxiv.org