arXiv · AI· Ziyin Zhang, Yuyu Guo, Ying Zhang, Siqiao Xue, Zihan Liao, Jin Qin, Wenjie Yang, Siyuan Yang, Shijie Li, Cheng Chen, Hao Wu, Zhaoyang Zhu, Ruipeng Li, Zhaokun Jiang, Lei Lei, Rui Wang, Hang Yu, Rui Wang·· 8 小时前AI 评分28
全模态嵌入的综述与路线图：从碎片化到融合
From Fragmentation to Fusion: A Survey and Roadmap for Omnimodal Embeddings
AI 导读
提出覆盖、可比性与组合性三级能力框架，指出全模态嵌入研究正基于对比学习与Transformer架构趋向收敛。 三条统一路径为：变换扩大覆盖、对齐实现可比、联合嵌入达成组合性，主张联合嵌入为终极目标。 该立场论文提供首个统一、跨领域处理的全模态嵌入研究综述与路线图。
来源：arXiv · AI · arxiv.org