跳到正文
arXiv · ML· Junghyun Lee, Sanghwa Kim, Yassir Jedra, Alexandre Prouti\`ere, Se-Young Yun·· 11 天前AI 评分23

基于预算约束的多 LLM 裁判实例最优评估估计方法

Instance-Optimal Estimation with Multiple LLM Judges on a Budget

AI 导读

针对 LLM-as-a-judge 评估成本高昂问题,论文提出实例最优的多裁判评估估计方法,结合已知裁判成本与独立无偏评分观察,解决固定预算下评估查询的分配难题。

来源:arXiv · ML · arxiv.org