跳到正文
arXiv · NLP· Tiejin Chen, Xiaoou Liu, Michael Clifford, Ahmadreza Moradipari, Yitao Chen, Kyungtae Han, Nejib Ammar, Hua Wei·· 5 小时前AI 评分33

Detect Before You Disambiguate: Perturbation-Based Input Ambiguity Detection in LLMs

Detect Before You Disambiguate: Perturbation-Based Input Ambiguity Detection in LLMs

AI 导读

针对 LLM 直接回答模糊输入的问题,提出保留标签的扰动框架检测输入歧义。 框架包含基于规则的黑盒和内部信号引导的白盒检测器,在四个数据集上优于输出侧不确定性基线。 代码已开源,结果强调在消歧前先检测歧义的重要性。

来源:arXiv · NLP · arxiv.org