跳到正文
arXiv · AI· Zongqi Wang, Rui Wang, Yuchuan Wu, Hua Yang, Bingxue Qiu, Tianle Gu, Bing Zhao, Yujiu Yang, Jieping Ye, Yongbin Li·· 8 小时前AI 评分28

SocialArena:评估大语言模型社交智能的基准

SocialArena: Evaluating Social Intelligence in Large Language Models

AI 导读

该研究提出 SocialArena 基准,通过三层框架定义社交智能,涵盖角色扮演、心理状态及行为推理能力。 采用 U-TRIMF 框架合成多样化社会情境,投入 13.24 万美元标注数据并实施人类竞技场协议。 旨在为 LLM 在心理健康、陪伴等交互式应用中的改进提供可靠洞察。

来源:arXiv · AI · arxiv.org