美团技术团队·· 2 天前AI 评分50
美团《Agent评测白皮书》:商家AI助手评测与优化闭环实践
《Agent评测白皮书》系列02:商家 AI 助手的评测与优化闭环实践
AI 导读
美团技术团队发布商家AI助手评测实践,针对KA巡检任务构建41个评测场景,设计确定性Grader与LLM Rubric协同判定。 评测器通过校准集及DAG规则修正假阴性,定位配置混杂、路由不唯一等根因。 优化使Agent能力上限与效率提升,瓶颈由“不会做”转为“不能稳定做对”。
来源:美团技术团队 · tech.meituan.com