arXiv · AI· Habibeh Naderi, Behrouz Haji Soleimani, Stan Matwin·· 24 天前AI 评分20
CoCo-LoRA:用于多模态不确定性估计的上下文贝叶斯 PEFT 方法
Beyond Feature Fusion: Contextual Bayesian PEFT for Multimodal Uncertainty Estimation
AI 导读
提出多模态 PEFT 方法 CoCo-LoRA,将音频作为上下文信号条件化低秩空间的不确定性,而非融合特征流。 该方法通过池化音频嵌入投影至共享上下文空间,结合局部文本适配器特征,实现轻量级异方差不确定性建模,在多任务评测中匹配或超越纯文本基线。 在低资源多模态预测任务中,CoCo-LoRA 提供了稳健且参数高效的替代方案。
来源:arXiv · AI · arxiv.org