arXiv · ML· Pan Wang, Lipeng Ke, Huajun Ying, Pritish Mohapatra, Rohan Sarkar, Suresh Lakhani, Sankar Venkataraman, Jingtong Hu·· 5 小时前AI 评分28
ConsMSA:面向多模态情感分析的语义分布一致性学习
ConsMSA: Semantic Distribution Consistency Learning for Multimodal Sentiment Analysis
AI 导读
ConsMSA通过形式化模态内与模态间语义分布一致性,在多模态情感分析中实现SOTA性能。 该模型利用一致性感知信号对齐潜在分布并重加权Token,在CMU-MOSI等基准上验证了鲁棒性。 仅需保留10%的Token即可维持准确率,确立了语义一致性提升计算效率的基础。
来源:arXiv · ML · arxiv.org