跳到正文
Hugging Face Blog·· 2023-05-15精选AI 评分62

RWKV:融合 Transformer 优势的新型 RNN 架构介绍

Introducing RWKV - An RNN with the advantages of a transformer

AI 导读

Hugging Face 官方发布博客,介绍结合了 RNN 与 Transformer 优势的 RWKV 架构,目前已集成至 transformers 库并支持多种模型规格。

推荐理由

介绍了 RWKV 架构如何融合 RNN 推理效率与 Transformer 长上下文优势,并展示了在 Hugging Face 上的完整使用示例。

来源:Hugging Face Blog · huggingface.co