基于 Mixtral 专家混合模型的未经审查的 8x7b 和 8x22b 微调模型,在编码任务中表现出色。由 Eric Hartford 创建。

8x7b 8x22b

431.8K 6 个月前

自述文件

Eric Hartford 创建的海豚模型,基于 Mixtral,并使用以下数据集进行训练

  • Synthia、OpenHermes 和 PureDove
  • 新的海豚-Coder
  • MagiCoder

尺寸

  • 海豚-Mixtral:8x22b
  • 海豚-Mixtral:8x7b

参考资料

HuggingFace