🎩 Magicoder 是一个 70 亿参数模型家族,使用 OSS-Instruct 在 75,000 个合成指令数据上进行训练,OSS-Instruct 是一种新颖的方法,可以通过开源代码片段来启发大型语言模型。
7b
28.7K 拉取请求 更新于 11 个月前
更新于 11 个月前
11 个月前
96b5e4193464 · 7.2GB
模型
架构llama
·
参数6.74B
·
量化Q8_0
7.2GB
参数
{"num_ctx":16384}
18B
模板
{{ .System }} @@ Instruction {{ .Prompt }} @@ Response
57B
系统
你是一个非常聪明的编码助手,始终提供准确可靠的...
134B
自述文件
🎩
Magicoder 是一个由 OSS-Instruct 支持的模型家族,OSS-Instruct 是一种新颖的方法,可以通过开源代码片段来启发大型语言模型,以生成低偏差、高质量的代码指令数据。
OSS-Instruct 通过为大型语言模型提供丰富的开源参考来缓解大型语言模型合成指令数据的内在偏差,从而生成更多样化、更真实、更可控的数据。