arXiv · ML· You Liu, Yue Liu, Quanchao Lu, Ergan Shang, Nick Shipilov·· 2026-10-14AI 评分31
OSCAR: 面向 AI 排名排序敏感性的感知修正模型
OSCAR: Order-aware Sensitivity Correction for AI Rankings
AI 导读
OSCAR 模型联合估计候选分数、评委敏感性及位置偏差,修正 Bradley-Terry 模型在显示顺序偏好下的拟合误差。 位置调整使四个数据集的留出对数损失降低 14-23%,在 MT-Bench 上使 GPT-4 取代 claude-v1 排名首位。 模拟显示评委敏感性恢复精度提升,95% 置信区间覆盖率达 94.4-95.2%。
来源:arXiv · ML · arxiv.org