跳到正文
arXiv · AI· Wenqing Zheng, Dmitri Kalaev, Noah Fatsi, Daniel Barcklow, Owen Reinert, Igor Melnyk, Senthil Kumar, C. Bayan Bruss·· 17 天前AI 评分28

MIGRASCOPE:基于互信息的RAG检索器分析框架与基准

Revisiting RAG Retrievers: An Information Theoretic Benchmark

AI 导读

MIGRASCOPE 提出基于互信息的指标以量化检索质量、冗余度及边际贡献,弥补现有 RAG 评估仅依赖 Recall 或 MRR 的不足。 在 4 个语料库和 13 种 SOTA 检索器(含词法、稠密及图基)上验证了该框架有效性。 结果表明图基检索器间存在冗余,而 BM25 具有信息互补性,基于互信息归因的集成可超越单一检索器。

来源:arXiv · AI · arxiv.org