arXiv · NLP· Jiantong Xu·· 10 天前AI 评分30
工作示例如何掩盖新规则的组合复用缺陷:自生成训练数据成本研究
A Cost That Practice Accuracy Hides: Worked Solutions in Self-Generated Training Data and the Compositional Use of New Rules
AI 导读
2B参数模型研究显示,单步操作准确率相同下,仅用规则表的训练使组合复用准确率高24.3个百分点。 工作示例目标虽节省捕获token,但组合成功时生成token量是规则表的2.6倍。
来源:arXiv · NLP · arxiv.org