跳到正文
arXiv · AI· Dushyant Rajput (AltSlate Labs LLP), Nirdesh Chauhan (AltSlate Labs LLP), Siddharth Kosaraju (AltSlate Labs LLP)·· 2026-10-14AI 评分31

托管决策模型 Jev-1.13.0 违反独立无关备选项原则:预注册测试

Does a Hosted Decision Model Respect Irrelevant Alternatives? A Pre-Registered Test of Option-Set Dependence in Jev

AI 导读

对托管决策模型 Jev-1.13.0 的预注册测试显示,增加无关选项会系统性改变正确与最强错误选项间的对数几率,违反独立无关备选项原则。 299,463 次调用中,新增选项导致 0.20-0.52 nats 的均方根偏移,约为运行间波动的 1.2-3 倍;选项达到 255 个时偏移约 1 nat,而独立打分虽消除依赖但正确率降低 8.7 个百分点。

来源:arXiv · AI · arxiv.org