跳到正文
arXiv · ML· Xaver R. Davey, David Broman·· 2 天前AI 评分34

SilverSpoon-KD: 通用知识蒸馏开源工具包发布

SilverSpoon-KD: A General-Purpose Toolkit for Knowledge Distillation

AI 导读

SilverSpoon-KD 是一个开源 PyTorch 工具包,提供首个通用分块(blockwise)知识蒸馏实现,并通过单一 API 统一了多种蒸馏范式与架构关系。

来源:arXiv · ML · arxiv.org