arXiv · NLP· Shrestha Ghosh, Luca Giordano, Yujia Hu, Tuan-Phong Nguyen, Simon Razniewski·· 2026-10-14AI 评分45
GPTKB v1.5 审计:对 GPT-4.1 前沿大模型知识的多维分析
Auditing a KB Elicitation of Frontier LLM Knowledge: A Multi-dimensional Analysis of GPTKB v1.5
AI 导读
研究对包含 1 亿条事实的 GPTKB v1.5 知识库进行了多维分析,该库源自 GPT-4.1。 结果表明,LLM 的知识准确性远低于此前基准测试所显示的水平,且存在显著的不一致性、模糊性和模型幻觉。 这一发现为神经符号 AI 在事实提取、整合与验证方面的研究指明了方向。
来源:arXiv · NLP · arxiv.org