跳到正文
arXiv · AI· Wenhan Yu, Xinbo Lin, Lanxin Ni, Jinhua Cheng, Lei Sha·· 3 天前AI 评分26

MSLR 基准测试:多步法律推理中的思维链效应分析

Benchmarking Multi-Step Legal Reasoning and Analyzing Chain-of-Thought Effects in Large Language Models

AI 导读

研究人员推出 MSLR,首个基于真实司法决策的中文多步法律推理数据集,旨在解决现有基准混淆事实召回与推理的问题。 该数据集采用 IRAC 框架建模专家推理,通过人机协作标注生成步骤级注释。实验显示模型表现仅中等,自主生成的思维链提示优于人工设计。

来源:arXiv · AI · arxiv.org