跳到正文
R/ArtificialInteligence· /u/YasufoKiddo·· 21 天前AI 评分46

Artificial Analysis 智能指数 v5 因“私有测试”受批评,称 GPT 和 Google 模型排名被抬高,开源中国模型被压低

New AA intelligence index v5 with “Private tests” conveniently upranks GPT, Google’s models, while open weights chinese models downrank

AI 导读

Artificial Analysis 发布的智能指数 v5 因引入“私有测试”受到批评,被指显著拉低开源权重模型在指数中的排名,并抬高 GPT 和 Google 模型的排名。 批评者认为在私有数据集上进行“trust me bro”式私有测试缺乏透明度,使得当前开源权重模型在指数 v5 中排名偏低,此举被认为存在可疑之处。

来源:R/ArtificialInteligence · reddit.com