研究团队发布ANT-A基准与ANT-OR框架提升多智能体标注一致性
热点事件持续更新
研究团队发布ANT-A基准与ANT-OR框架提升多智能体标注一致性
1 篇报道1 个报道来源5 小时前更新
先了解这件事
AI 综述
研究人员Xiaopeng Ke等人于2026年10月提出ANT-A基准与ANT-OR多智能体标注框架，旨在解决现有基准与世界实际标注任务脱节的问题，相关成果已被EMNLP 2026 Findings接收。 ANT-A基准包含7个数据集，每实例提供5个独立人类标签，采用Fleiss kappa系数评估模型与人类标注分布的对齐度，为多标注者场景提供系统化评测标准。 实验表明ANT-OR框架相比最强基线在agreement@>=2指标上提升4.5个百分点，且在分布对齐度上取得最高分，相关代码与基准已开源供研究使用。
AI 根据报道生成 · 2 小时前更新
最新进展10月26日 12:00
ANT-A 基准与 ANT-OR 框架：优化多智能体标注以匹配人类一致性报道时间线
沿着报道，了解事件的不同侧面。
10月26日
- arXiv · NLPANT-A 基准与 ANT-OR 框架：优化多智能体标注以匹配人类一致性
研究人员提出 ANT-A 基准和 ANT-OR 多智能体标注框架，解决现有基准与世界实际标注任务脱节的问题。 ANT-A 包含 7 个数据集和每实例 5 个独立人类标签，采用 Fleiss kappa 系数评估模型与人类标注分布的对齐度。 实验显示 ANT-OR 比最强基线提升 agreement@>=2 准确率 4.5 个百分点，并在分布对齐度上取得最高分，相关代码和基准已开源。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。