Hugging Face Blog·· 2023-09-06精选AI 评分78
TII 的 Falcon 180B 上线 Hugging Face
Spread Your Wings: Falcon 180B is here
AI 导读
TII 发布 Falcon 180B 并上线 Hugging Face,参数规模 1800 亿,在 3.5 万亿 token 的 RefinedWeb 数据上预训练,是当时最大的公开可用语言模型。
推荐理由
Falcon 180B 以 1800 亿参数和 3.5 万亿 token 预训练规模进入开源生态,读者可据此了解当时开源模型与闭源模型的差距。
来源:Hugging Face Blog · huggingface.co