Hugging Face Blog·· 2023-05-04精选AI 评分78
BigCode 发布 StarCoder:面向代码的 15B 开源大模型
StarCoder: A State-of-the-Art LLM for Code
AI 导读
BigCode 发布 StarCoder 与 StarCoderBase 两个代码大语言模型,基于 GitHub 上 80 多种编程语言的宽松许可数据训练,参数量约 15B、训练 1 万亿 token,上下文长度超过 8,000 token。
推荐理由
BigCode 公开了 StarCoder 的权重、训练数据与评测结果,读者可据此判断开源代码模型当时的水平与许可条件。
来源:Hugging Face Blog · huggingface.co