跳到正文
arXiv · AI· Yiqian Huang, Yang Zhou, Qianying Liu, Shaowen Peng, Yuntao Kong, Kotaro Funakoshi, Chuan Xiao, Manabu Okumura, Yang Cao, Shuyuan Zheng·· 2026-10-16AI 评分25

诊断 LLM 在时态法律推理中错误适用法律的问题

When Do LLMs Apply the Wrong Law? Diagnosing LLM Failures in Temporal Legal Reasoning

AI 导读

研究将时态适用法律确定(TALD)形式化,构建含 51,956 份中国民事判决书的基准,评估 9 种先进 LLM,发现模型存在强新法偏好。 新法案件准确率超 70%,旧法案件低于 25%;强化通用推理不必然提升 TALD 准确率,而时态法律提示可显著改善表现并降低版本推理中的不确定性。 结果凸显适配 LLM 如何应用既有能力的重要性,而非单靠提升法律知识或通用推理。

来源:arXiv · AI · arxiv.org