跳到正文
arXiv · NLP· Peter Cho-Ho Lam, Ziyi Wang, Zirui Zhou·· 3 小时前AI 评分30

预训练 Transformer 上针对任意输出序列的 Prefix-Tuning

Prefix-Tuning for Arbitrary Output Sequences on Pretrained Transformers

AI 导读

summary_zh: 文章证明在目标序列属于预训练 Transformer 输出范围的前提下,存在可计算的 prefix 引导模型生成指定输出,该假设是必要的。

来源:arXiv · NLP · arxiv.org