CME-SpectrumBench 凝聚态光谱 LLM 基准发布
热点事件持续更新
CME-SpectrumBench 凝聚态光谱 LLM 基准发布
1 篇报道1 个报道来源9 小时前更新
先了解这件事
AI 综述
Jin Gene Wong 等研究者提出并公开 CME-SpectrumBench，这是包含 190 道题目的专家设计基准，专门用于评估前沿 LLM 分析凝聚态实验（CME）级光谱科学数据的能力。 测试结果显示，在直接查询模式下模型表现远逊于手写代码；但当允许使用 Python 解释器并配合 ReAct 提示时，LLM 的表现能与手写代码相当。相关代码和数据已向公众开放。
AI 根据报道生成 · 1 小时前更新
最新进展10月20日 12:00
CME-SpectrumBench 评估 LLM 分析凝聚态光谱数据的能力报道时间线
沿着报道，了解事件的不同侧面。
10月20日
- arXiv · AICME-SpectrumBench 评估 LLM 分析凝聚态光谱数据的能力
CME-SpectrumBench 是一个包含 190 道题目的专家设计基准，用于评估前沿 LLM 分析凝聚态实验（CME）级光谱科学数据的能力。 直接查询时，模型表现远逊于手写代码；允许使用 Python 解释器配合 ReAct 提示时，其表现与手写代码相当。代码和数据已公开。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。