一个开源的专家混合(Mixture-of-Experts)代码语言模型,其在特定代码任务中的性能可与GPT4-Turbo媲美。

16b 236b

423.5K 3个月前

自述文件

DeepSeek-Coder-V2是一个开源的专家混合(MoE)代码语言模型,其在特定代码任务中的性能可与GPT4-Turbo媲美。DeepSeek-Coder-V2是在DeepSeek-Coder-V2-Base的基础上,使用来自高质量多源语料库的6万亿个token进行进一步预训练的。

参考

Hugging Face