arXiv · AI· Alina Nesen, Prathyusha Kanmanth Reddy, David Relyea, Rohit Avinash Mujumdar, Samaneh Karimi, Bo Shen, Jordan Hashemi·· 4 小时前AI 评分31
MOSS：监控和诊断搜索与推荐系统中语义故障的生产框架
MOSS: A Production Framework for Monitoring and Diagnosing Semantic Failures in Search and Recommendation Systems
AI 导读
大型美国零售商部署 MOSS 框架超六个月，捕获两个服务缺陷，其中一个修复使告警率相对降低 76.4%。 基于 498 对人工标注推荐基准，前沿 LLM 在需意图级推理任务上的 F1 和 AUC 显著优于内部嵌入与 SBERT。 单一 LLM 监控框架经提示词适配即可迁移至搜索场景，为大电商提供可操作的质量信号。
来源：arXiv · AI · arxiv.org