Hugging Face Blog·· 2022-10-03AI 评分39
Hugging Face Hub 支持零样本评估 660 亿参数大模型
Very Large Language Models and How to Evaluate Them
AI 导读
Hugging Face 升级 AutoTrain 基础设施,允许用户在 Hub 上免费对 660 亿参数的因果语言模型执行零样本分类评估。该技术通过计算令牌对数概率来衡量模型性能,无需标记数据;评估 660 亿参数模型处理 2000 个句子级样本仅需 3.5 小时。
来源:Hugging Face Blog · huggingface.co