多智能体同行评估协议Agents-as-Peers发布
热点事件持续更新
多智能体同行评估协议Agents-as-Peers发布
1 篇报道1 个报道来源3 小时前更新
先了解这件事
AI 综述
2026年10月21日，Yanki Margalit等研究者在arXiv平台发布了多智能体同行评估协议“Agents-as-Peers”。该协议将LLM评估重新定义为多智能体互评问题，采用分布式机制，确保每个智能体负责生成任务、回答共享题库并互评其他智能体的答案，全程不设特权评估者。 研究团队在实验中使用12个LLM和420道题目，共收集了55,440个非自我互评判断。数据显示自我评分普遍高于互评分数，且首位答案获得了0.39分的额外优势。同时，互评分数与TruthfulQA的准确率呈现出高达r=0.904的强相关性。该协议支持将排名与测得的偏差及评分者效应一同报告，为消除评估偏见提供了新的技术路径。
AI 根据报道生成 · 37 分钟前更新
最新进展10月21日 12:00
Agents-as-Peers：一种用于 LLM 评估的多智能体同侪互评协议报道时间线
沿着报道，了解事件的不同侧面。
10月21日
- arXiv · AIAgents-as-Peers：一种用于 LLM 评估的多智能体同侪互评协议
Agents-as-Peers 提出多智能体互评协议，在 12 个 LLM 和 420 道题目中收集 55,440 个非自我互评判断。 实验发现自我评分普遍高于互评分数，且首位答案获得额外 0.39 分优势；互评分数与 TruthfulQA 准确率相关达 r=0.904。 该协议支持将排名与测量出的偏差及评分者效应一同报告。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。