arXiv · ML· Aryan Chowdhury, Yizheng Sun, Thomas Carroll, Riza Batista-Navarro·· 1 天前AI 评分22
MOSAIC:通过模态分区梯度路由解决任务-模态依赖失衡
MOSAIC: Addressing Disproportionate Task-Modality Dependencies via Modality-Partitioned Gradient Routing
AI 导读
提出MOSAIC架构,通过模态分区保留单模态表征并路由梯度,解决多任务中任务对特定模态依赖失衡的问题。 在Corpus of Everyday Japanese Conversation上,MOSAIC使四个任务的平均宏F1提升7.4分,骨干参数量较融合基线减少72%。
来源:arXiv · ML · arxiv.org