跳到正文
机器之心·· 4 小时前精选AI 评分70

OpenDS-World评测显示最强模型在真实互联网深度搜索中准确率仅39%

最强模型准确率仅39%!当Deep Search真正进入复杂的真实互联网

AI 导读

研究团队提出OpenDS任务范式并构建OpenDS-World基准,测试12个前沿模型在真实开放网络中自主搜索多源信息的能力。表现最好的GPT-6 Astra准确率仅39%,且大部分模型在失败调用上消耗了超过40%的执行时间,揭示出Agent在长程决策、异构格式处理和失败恢复方面仍存在显著瓶颈。

推荐理由

报告给出了12个前沿模型在真实开放网络搜索中的量化差距,读者可据此判断当前Agent在长程决策与多源证据整合上的具体短板。

来源:机器之心 · mp.weixin.qq.com