跳到正文
arXiv · AI· Habibeh Naderi, Behrouz Haji Soleimani, Stan Matwin·· 24 天前AI 评分20

CoCo-LoRA:用于多模态不确定性估计的上下文贝叶斯 PEFT 方法

Beyond Feature Fusion: Contextual Bayesian PEFT for Multimodal Uncertainty Estimation

AI 导读

提出多模态 PEFT 方法 CoCo-LoRA,将音频作为上下文信号条件化低秩空间的不确定性,而非融合特征流。 该方法通过池化音频嵌入投影至共享上下文空间,结合局部文本适配器特征,实现轻量级异方差不确定性建模,在多任务评测中匹配或超越纯文本基线。 在低资源多模态预测任务中,CoCo-LoRA 提供了稳健且参数高效的替代方案。

来源:arXiv · AI · arxiv.org