开源LLM双语圣训回忆基准测试发布

2026年11月，Dayam Nadeem等研究人员在arXiv发布双语圣训回忆基准测试。该基准针对五款可本地部署的开源LLM，要求模型仅凭参数记忆复现六大逊尼派圣训集文本，禁止使用检索增强。 测试共进行30,000次响应，结果显示无一模型同时满足高词法与语义保真度。阿拉伯语生成表现普遍劣于英语，均未实现精确匹配。 研究结论指出，无检索增强的开源LLM无法作为可靠宗教文本来源。伊斯兰学术部署应强制采用基于验证语料的检索增强生成策略。

AI 根据报道生成 · 51 分钟前更新

还没有足够的连续观测数据，暂不绘制趋势。