arXiv · NLP· Xiaoyu Li, Jiangxuan Long·· 3 天前AI 评分21
自适应测试时缩放的任意时刻有效 PAC-Bayes 证书
Anytime-Valid PAC-Bayes Certificates for Adaptive Test-Time Scaling
AI 导读
研究提出任意时刻有效的 PAC-Bayes 证书,解决自适应测试时缩放中校准选择后的统计推断问题。 针对有限预算与验证器网格,罚项为 $\log M/n$;在 GSM8K 上,该证书在 5% 名义水平下始终优于最佳选择误差,全测试集误差紧化至 0.109。 提供了一种无分布假设的轻量级方法,用于报告自适应推理系统的风险与计算成本。
来源:arXiv · NLP · arxiv.org