PLANE模块：缓解大型视觉语言模型幻觉的新方案

1. 12:00
   arXiv · NLP

   PLANE：用于缓解大型视觉语言模型幻觉的即插即用细粒度视觉专家模块

   研究提出即插即用细粒度视觉专家（PLANE），通过LoRA视觉专家与指令感知门控网络融合图像特征，有效减少大型视觉语言模型幻觉。 PLANE利用对象、属性及关系三方面数据训练三个LoRA专家，并构建GPT4无关的GIFT基准测试。 实验显示PLANE能降低不同模型幻觉，引入极少推理延迟，且优于现有基准。

趋势仅比较持续完整观测到的相同主体，范围可能小于当前热度统计。移动指针或点击图表查看每小时热度；键盘可用左右方向键切换。