跳到正文
arXiv · NLP· Divyansh Singh·· 5 小时前AI 评分27

LeakScale 估计基准暴露的因果效应

LeakScale: Estimating the Causal Effect of Benchmark Exposure

AI 导读

LeakScale 提出因果测量框架,量化基准暴露对模型性能的影响。在 589,824 次生成实验中,暴露使所有模型域组合的准确率提升 3.22 至 10.66 个百分点。该框架将污染分析从接触检测转向效应测量。

来源:arXiv · NLP · arxiv.org