RubricAtlas评估框架发布
热点事件持续更新
RubricAtlas评估框架发布
1 篇报道1 个报道来源4 小时前更新
先了解这件事
AI 综述
2026年10月28日,一篇发表于arXiv的论文提出了RubricAtlas框架,旨在评估深度研究智能体。该框架基于3,079份中文金融研报构建,覆盖99种研究类型,通过从专家报告中挖掘类型级评分细则来组织详细检查点。 实验结果显示,单份报告仅能覆盖半数的分析问题,且不同参考报告的选择会改变评测分数与排名。在10个智能体的测试中,两条评审流水线达成了0.71的检查点一致率和0.87的Kendall τ排名一致性。
AI 根据报道生成 · 3 小时前更新
最新进展10月28日 12:00
RubricAtlas:从专家报告中挖掘类型级评分细则以评估深度研究智能体报道时间线
沿着报道,了解事件的不同侧面。
10月28日
- arXiv · AIRubricAtlas:从专家报告中挖掘类型级评分细则以评估深度研究智能体
提出 RubricAtlas 框架,基于 3,079 份中文金融研报构建类型级评分细则,覆盖 99 种研究类型。 实验显示单份报告仅覆盖半数分析问题,不同参考报告选择会改变评测分数与排名。 在 10 个智能体上,两条评审流水线达成 0.71 的检查点一致率和 0.87 的 Kendall τ 排名一致性。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。