Stable LM 2 是一款先进的语言模型,拥有 16 亿和 120 亿参数,基于英语、西班牙语、德语、意大利语、法语、葡萄牙语和荷兰语的多语言数据进行训练。
16亿 120亿
99.8K 拉取 更新于 7个月前
自述文件
Stable LM 2 1.6B 是一款先进的语言模型,拥有 16 亿和 120 亿参数,基于英语、西班牙语、德语、意大利语、法语、葡萄牙语和荷兰语的多语言数据进行训练。
该模型使用混合的公开数据集和合成数据集进行训练,并利用直接偏好优化 (DPO)。