跳到正文
arXiv · NLP· Ankit Gupta·· 2 天前AI 评分30

NONSENSE 探针揭示稠密检索模型中的语义性缺口

NONSENSE: Non-Semantic Strings Expose Semanticity Gaps in Dense Retrieval

AI 导读

研究者提出的 NONSENSE 黑盒探针构造无意义字符串,在 5 个数据集和 3 种单向量检索器上频繁获得高分甚至排名第一。 这些高分字符串并非相关文档,证明现有稠密检索模型的相似度分数与语义证据脱节。 该结果强调了评估检索模型时,不仅要看相关性,更要看相似度分数反映语义证据的可靠性。

来源:arXiv · NLP · arxiv.org