跳到正文
arXiv · ML· Amirmohammad Farzaneh, Osvaldo Simeone·· 9 小时前AI 评分23

PS-DME 提出解决后选择偏差的模型分布评估框架

Post-Selection Distributional Model Evaluation

AI 导读

PS-DME 是一种基于 e-values 的通用框架,旨在在任意数据依赖模型预选择后提供统计上有效的分布式模型评估。 该框架控制后选择假覆盖率(FCR),并在明确条件下被证明比样本分割基线方法更具样本效率。 在合成数据、LLM 文本到 SQL 解码及电信网络性能评估中,PS-DME 支持跨不同可靠性水平可靠比较候选配置,实现性能与可靠性权衡的统计可靠探索。

来源:arXiv · ML · arxiv.org