跳到正文
热点事件持续更新

OpenDS基准揭示顶尖模型深度搜索瓶颈

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

研究团队在《Deep Search in Real-World Web Environments》论文中提出OpenDS任务范式,并构建面向真实开放网络环境的评测基准OpenDS-World。该基准旨在测试模型在真实互联网中自主搜索多源信息的能力。 评测结果显示,表现最佳的GPT-6 Astra模型准确率仅为39%。此外,大部分模型在失败调用上消耗了超过40%的执行时间。 这一结果揭示了当前AI Agent在长程决策、异构格式处理和失败恢复方面仍存在显著瓶颈,反映出真实场景下深度搜索任务的高难度。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月30日
  1. 机器之心精选
    OpenDS-World评测显示最强模型在真实互联网深度搜索中准确率仅39%

    研究团队提出OpenDS任务范式并构建OpenDS-World基准,测试12个前沿模型在真实开放网络中自主搜索多源信息的能力。表现最好的GPT-6 Astra准确率仅39%,且大部分模型在失败调用上消耗了超过40%的执行时间,揭示出Agent在长程决策、异构格式处理和失败恢复方面仍存在显著瓶颈。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。