smollm

🪐 一个包含 1.35 亿、3.6 亿和 17 亿参数的小模型系列，在新的高质量数据集上训练。

1.35 亿 3.6 亿 17 亿

80.1K 拉取更新 2 个月前

2 个月前更新

2 个月前

66875ceb33a7 · 235MB

Apache License Version 2.0, January 200

自述文件

SmolLM 是一个包含三种尺寸的小型语言模型系列：1.35 亿、3.6 亿和 17 亿参数。

参考资料