arXiv · NLP· Alberto Cattaneo, Carlo Luschi, Daniel Justus·· 2026-10-15AI 评分25
SynthKGQA 为知识图谱增强 LLM 提供训练与评估的真值子图
Ground-Truth Subgraphs for Better Training and Evaluation of Knowledge Graph Augmented LLMs
AI 导读
SynthKGQA 框架从任意知识图谱生成含真值子图的 QA 数据集,解决图检索评测缺乏 ground-truth 目标的难题。 其应用在 Wikidata 衍生图谱 ogbl-wikikg2 上生成 GTSQA 数据集,验证了基于 GTSQA 训练的检索器可迁移至人工基准,且真值子图提供的监督信号优于传统启发式方法。 该数据集支持零样本泛化测试,能以细粒度分析 SOTA 图检索方法的能力与局限。
来源:arXiv · NLP · arxiv.org