跳到正文
arXiv · NLP· Aidan McCarthy·· 5 小时前AI 评分23

LAMB:基于 ModernBERT 的现代拉丁语上下文语言模型

LAMB: A Modern Contextual Language Model for Latin

AI 导读

LAMB 是基于 ModernBERT 架构的拉丁语编码器,使用超过 74B 拉丁语 token 进行预训练。该模型在 17 个子任务中的 16 个上优于其他模型,在 1 个上落后 0.8 个百分点。

来源:arXiv · NLP · arxiv.org