跳到正文
热点事件观察中

DISCERN基准评估AI科学发现能力

1 篇报道1 个报道来源1 天前更新

先了解这件事

AI 综述

DISCERN是一项基于真实公开数据集的受控基准,旨在评估自动化科研工作流中三个关键层级的科学发现能力。 该基准涵盖203个任务、8个生命科学赛道及8个模型。测试结果显示,各模型在三个层级中的满分率分别为60.8%、34.2%和0.6%。 基准指出,聚合高分掩盖了层级特异性弱点。当前AI智能体尚未展示可靠的自主分析与发现能力,仅适合在监督式场景下作为辅助工具。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月27日
  1. arXiv · AI
    DISCERN 基准评估 AI 智能体的科学发现能力

    DISCERN 基准显示 AI 智能体未能像科学家一样可靠引导发现,8 个模型在 3 个层级中的满分率分别为 60.8%、34.2% 和 0.6%。该基准基于 203 个任务、8 个生命科学赛道及 8 个模型,指出聚合高分掩盖了层级特异性弱点,当前智能体尚未展示可靠的自主分析与发现能力,仅适合监督式辅助。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。