跳到正文
arXiv · NLP· Ziqi Liu, Ruiwei Xiao, Yuxuan Li, John Stamper·· 8 小时前AI 评分32

EduWild:教师配置的聊天机器人在真实世界中的失败模式及修复方案

EduWild: How Teacher-Configured Chatbots Fail in Real-World Use and How to Fix Them

AI 导读

研究引入包含 1,726 段对话的 EduWild 数据集,揭示教师配置聊天机器人最常遗漏工作流步骤(53.8%)和预期设定(33.4%)。 基于此设计的基于提示词的框架在 200 名大学生实验中,将平均目标失败代码数从 1.406 降至 0.489,相对减少 65.2%。 这些结果表明真实世界失败分析能有效指导教育聊天机器人的实用改进。

来源:arXiv · NLP · arxiv.org