arXiv · AI· Linan Zhu, Zihao Zhai, Mengfei Xu, Xiao Han, Yuqian Fu, Xiangfan Chen, Zihang Zhang·· 5 小时前AI 评分31
CLEAR:耦合局部证据与情感表征用于多模态情感识别
CLEAR: Coupling Local Evidence with Affective Representations for Multimodal Emotion Recognition in Conversation
AI 导读
提出 CLEAR 框架,用于多模态会话情感识别(ERC),在 IEMOCAP 和 MELD 数据集上取得有竞争力的性能。 该框架通过耦合多模态上下文表征与局部判别线索来改进情绪预测,采用情绪监督视觉语言模型(VLM)的连续内部表征替代生成的情绪标签,并利用样本自适应残差耦合动态整合文本和声学证据。代码已公开。
来源:arXiv · AI · arxiv.org