arXiv · AI· Michal Orzechowski, Rund Tawfiq, Tomasz Kosciolek·· 8 小时前AI 评分37
本体论作为 LLM 智能体校验器：人工精选、LLM 生成与数据衍生对比
What Does an Ontology Catch? Curated, LLM-Generated and Data-Derived Ontologies as Checkers of LLM Agents over Knowledge Graphs
AI 导读
研究评估了人工精选、LLM 生成及数据衍生本体在 Web 知识图谱上校验 LLM 智能体答案的效果，涵盖近 10^9 三元组公私数据。结果显示人工本体常将正确答案误判为错误，其精准度仅略高于随机标记，且与其自身数据存在矛盾。
来源：arXiv · AI · arxiv.org