arXiv · ML· Xue Zheng, Aylin Yener·· 14 天前AI 评分22
S³-MoE:面向联邦混合专家的服务器端稀疏专家分配框架
Server-Side Sparse Assignment for Federated Mixture-of-Experts
AI 导读
提出服务器端稀疏专家分配框架 S³-MoE,通过利用局部观测和探索机制恢复客户端相关的专家。 S³-MoE 相比使用全量专家的 FedAvg 平均准确率提高 1.31 个百分点,但每个客户端仅需加载 5 个专家。 该工作已被 2026 IEEE ITW 会议接收。
来源:arXiv · ML · arxiv.org