6 个月前更新
6 个月前
21ae152d49e0 · 9.1GB
模型
架构starcoder2
·
参数16B
·
量化Q4_0
9.1GB
参数
{ "stop": [ "<file_sep>", "<|end_of_text|>" ] }
41B
模板
<file_sep> {{- if .Suffix }}<fim_prefix> {{ .Prompt }}<fim_suffix>{{ .Suffix }}<fim_middle> {{- else
142B
许可证
BigCode Open RAIL-M v1 许可协议 第一部分:序言 本 OpenRAIL-M 许可协议是
13kB
自述文件
StarCoder2支持高达16,384个令牌的上下文窗口,是下一代透明训练的开放代码LLM。
starcoder2:instruct
:一个遵循自然和人类编写指令的15B模型starcoder2:15b
在600多种编程语言和4万亿+个tokens上训练。starcoder2:7b
在17种编程语言和3.5万亿+个tokens上训练。starcoder2:3b
在17种编程语言和3万亿+个tokens上训练。
StarCoder2-15B在其规模类别中是最好的,并且在许多评估中与33B+模型相匹配。 StarCoder2-3B的性能与StarCoder1-15B相当。