跳到正文
arXiv · NLP· Yuanjian Xu, Jianing Hao, Tianze Sun, Yongyao Duan, Sam Chen, Jinyi Han, Wanbo Zhang, Yuxuan Sun, Guang Zhang, Zhong Li·· 2026-10-16AI 评分27

大语言模型数据策略综述:训练全生命周期统一视角

Data Strategies for Large Language Models: A Unified Perspective on the Training Lifecycle

AI 导读

该综述统一了大语言模型训练生命周期中的数据策略,提出将策略视为分配训练预算的策略函数。 方法按决策粒度、模型依赖性及时间适应性分类,细粒度策略虽控制力强但增加推理成本。 跨模型规模传输及端到端成本证据有限,论文附持续更新的资源列表。

来源:arXiv · NLP · arxiv.org