arXiv · ML· Mian Wang·· 17 天前AI 评分26
神经网络训练、学习、推理与强化学习的统一动力学研究
Unified dynamics of training, learning, inference, and reinforcement in neural networks
AI 导读
研究者通过nanoGPT实验确立了训练、学习与推理间的关联,并预测更新后的能力转换。 在5088个目标上,该预测器实现了91.43%的准确率和91.49%的四向宏观召回率。 该研究在五个额外架构中验证了这些关系,并展示了反馈再平衡如何将准确率从70.31%恢复至99.48%。
来源:arXiv · ML · arxiv.org