跳到正文
arXiv · NLP· Md Tahmid Rahman Laskar, Xue-Yong Fu, Shashi Bhushan TN·· 2 天前AI 评分34

决策模型能否替代 LLM 处理呼叫中心分类与判断任务

Can Decision Models Replace LLMs in Real-World Contact Center Classification and Judging Tasks?

AI 导读

研究在 8 个呼叫中心场景中对比 9 种决策模型与 13 种生成式 LLM,显示多数决策模型分类性能可媲美前沿 LLM。 API 型闭源决策模型单位请求成本最低,高置信度预测更准确,支持选择性路由;但多数决策模型极少选择“无答案”选项,且小模型判断质量急剧下降、位置偏差更明显。 研究为基于弃权行为、置信度和部署成本而非仅总体准确率的选择决策模型提供实用指导。

来源:arXiv · NLP · arxiv.org