跳到正文
arXiv · ML· Hengxiang Zhang, Junxian Liu, Hongxin Wei·· 2026-10-14AI 评分34

WildTrace: 评估真实大规模 LLM 后训练中训练数据检测的基准

WildTrace: Evaluating Training Data Detection in Realistic Large-Scale LLM Post-Training

AI 导读

WildTrace 基准在 SFT、DPO 和 RL 后训练阶段中,最佳训练数据检测方法的平均 AUC 仅为 0.529,接近随机猜测的 0.5 水平。 该基准构建了匹配分布的评测集,并证实评测协议对检测性能有显著影响。 这些结果表明在真实场景下开发有效、鲁棒的检测方法具有巨大潜力。

来源:arXiv · ML · arxiv.org