Zephyr 是一系列 Mistral 和 Mixtral 模型的微调版本,旨在作为有用的助手。

7b 141b

23.2万 9个月前

自述文件

Zephyr 是一系列旨在作为有益助手而训练的语言模型。Zephyr 141B-A35B 是该系列中的最新模型,并且是 Mixtral 8x22b 的微调版本。

尺寸

  • zephyr:141b:一个混合专家 (MoE) 模型,总参数为 141B,活跃参数为 35B。
  • zephyr:7b:原始的 Zephyr 模型

来源