arXiv · NLP· Md Tahmid Rahman Laskar, Xue-Yong Fu, Shashi Bhushan TN·· 2 天前AI 评分34
决策模型能否替代 LLM 处理呼叫中心分类与判断任务
Can Decision Models Replace LLMs in Real-World Contact Center Classification and Judging Tasks?
AI 导读
研究在 8 个呼叫中心场景中对比 9 种决策模型与 13 种生成式 LLM,显示多数决策模型分类性能可媲美前沿 LLM。 API 型闭源决策模型单位请求成本最低,高置信度预测更准确,支持选择性路由;但多数决策模型极少选择“无答案”选项,且小模型判断质量急剧下降、位置偏差更明显。 研究为基于弃权行为、置信度和部署成本而非仅总体准确率的选择决策模型提供实用指导。
来源:arXiv · NLP · arxiv.org