华中科大团队提出全连续多模态模型Multimodal Flow
热点事件持续更新
华中科大团队提出全连续多模态模型Multimodal Flow
1 篇报道1 个报道来源4 小时前更新
先了解这件事
AI 综述
华中科技大学王兴刚团队联合地平线机器人等机构,提出名为“Multimodal Flow”的全连续架构多模态模型。该模型核心机制是让语言与视觉信号保留原生嵌入形式,并共享同一套Flow Matching训练目标。其代表性实例为1.6B参数的MF-1模型。该模型在训练效率与性能上展现了显著优势:仅使用150B Tokens即可完成预训练,GenEval综合评分达到0.821,VQAv2问答测试得分为72.6。在受控对比中,该模型表现全面超越了传统的混合式及全离散架构方案。团队已将相关代码开源,旨在推动全连续多模态建模的技术演进。
AI 根据报道生成 · 2 小时前更新
最新进展11月5日 16:21
华中科技大学团队提出Multimodal Flow:全连续多模态模型统一语言与视觉报道时间线
沿着报道,了解事件的不同侧面。
11月5日
- 机器之心华中科技大学团队提出Multimodal Flow:全连续多模态模型统一语言与视觉
华中科技大学王兴刚团队与地平线机器人等机构合作提出全连续架构Multimodal Flow,让语言与视觉保留原生嵌入并共享同一Flow Matching目标。1.6B的MF-1模型仅用150B Tokens预训练,GenEval综合得分0.821,VQAv2得分72.6,在受控对比中全面超越混合式和全离散架构。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。