跳到正文
arXiv · ML· Reihaneh Zohrabi, Hosein Hasani, Akshita Gupta, Mahdieh Soleymani Baghshah, Anna Rohrbach, Marcus Rohrbach·· 10 天前AI 评分30

HaloProbe:检测并缓解视觉语言模型对象幻觉的贝叶斯框架

HaloProbe: Bayesian Detection and Mitigation of Object Hallucinations in Vision-Language Models

AI 导读

HaloProbe 提出了一种贝叶斯框架,用于检测和缓解视觉语言模型(VLM)中的对象幻觉。该框架通过因子化外部描述统计和内部解码信号,估计 token 级别的幻觉概率。 实验表明,由 HaloProbe 引导的解码在减少幻觉方面比最先进的基于干预的方法更有效,同时保留了字幕效用和语言流畅性。

来源:arXiv · ML · arxiv.org