一个表现优异的专家混合模型,使用高质量数据进行微调。

8x7b

24.4K 14 个月前

自述文件

此模型是使用高质量、经过整理的数据集对 Mixtral 进行微调的版本。截至 2023 年 12 月 26 日,此模型是 Hugging Face Open LLM Leaderboard 上排名最高的 MoE(专家混合)模型。

参考

HuggingFace

Argilla