arXiv · AI· Xiongyu Chen, Sizhen Zhu, Zhuoer Wang·· 7 小时前AI 评分31
金融问答幻觉检测:PHANTOM 基准上的类型感知分析与层级检测器研究
Beyond Binary Detection: Type-Aware Hallucination Analysis and Hierarchical Detection in Financial Question Answering
AI 导读
针对金融问答中的 LLM 幻觉问题,该研究在 PHANTOM 基准上分析了 9 类幻觉,发现传统二元检测器子类型准确率仅 44.7%。 研究提出一种两阶段层级检测器,将二元准确率提升至 95.6%,子类型准确率提高至 56.1%,优于单一指标评估。 结果表明,类型级评估能揭示聚合指标所掩盖的检测器弱点,对金融合规场景具有参考意义。
来源:arXiv · AI · arxiv.org