arXiv · ML· Mame Diarra Toure, David A. Stephens·· 10 天前AI 评分26
Singular Bayesian Neural Networks 将贝叶斯神经网络参数量降至 $O(r(m+n))$
Singular Bayesian Neural Networks
AI 导读
Singular Bayesian Neural Networks 通过低秩参数化将后验复杂度项从 $\sqrt{mn}$ 降至 $\sqrt{r(m+n)}$,在 MLP、LSTM 和 Transformer 上实现最多 33 倍参数量缩减。 该方法利用共享隐因子捕获结构化权重相关性,显著改进 OOD 检测性能,并在多数情况下提升校准效果。
来源:arXiv · ML · arxiv.org