跳到正文
热点事件持续更新

RubricAtlas评估框架发布

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

2026年10月28日,一篇发表于arXiv的论文提出了RubricAtlas框架,旨在评估深度研究智能体。该框架基于3,079份中文金融研报构建,覆盖99种研究类型,通过从专家报告中挖掘类型级评分细则来组织详细检查点。 实验结果显示,单份报告仅能覆盖半数的分析问题,且不同参考报告的选择会改变评测分数与排名。在10个智能体的测试中,两条评审流水线达成了0.71的检查点一致率和0.87的Kendall τ排名一致性。

AI 根据报道生成 · 3 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. arXiv · AI
    RubricAtlas:从专家报告中挖掘类型级评分细则以评估深度研究智能体

    提出 RubricAtlas 框架,基于 3,079 份中文金融研报构建类型级评分细则,覆盖 99 种研究类型。 实验显示单份报告仅覆盖半数分析问题,不同参考报告选择会改变评测分数与排名。 在 10 个智能体上,两条评审流水线达成 0.71 的检查点一致率和 0.87 的 Kendall τ 排名一致性。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。