arXiv · AI· Zerui Chen, Qinggang Zhang, Qichuan Liu, Zhishang Xiang, Zhimin Wei, Yunbo Tang, Zhuo Li, Jinsong Su, Zhihong Zhang·· 8 小时前AI 评分35
MAC-Bench 提出评估多智能体协作的互联任务基准
MAC-Bench: Benchmarking Multi-Agent Collaboration via Interconnected Tasks
AI 导读
MAC-Bench 是首个无需预定义智能体角色或通信协议,而是将协作需求直接嵌入任务依赖与共享资源约束中的综合基准。 该基准通过在局部和全局两个层级挖掘可重用的协作结构,并利用粗到细的组成方法,将这些结构重组为具有不同协作要求的任务图。 MAC-Bench 在可执行环境中实例化任务,并支持对部分进度和完整任务解决结果进行自动化验证。
来源:arXiv · AI · arxiv.org