Zephyr是一系列经过微调的Mistral和Mixtral模型,经过训练可以作为有用的助手。

7b 141b

22.65万 7个月前

自述文件

Zephyr是一系列经过训练可以作为有用助手的语言模型。Zephyr 141B-A35B是该系列中的最新模型,它是Mixtral 8x22b的微调版本。

尺寸

  • zephyr:141b:一个专家混合(MoE)模型,共有141B个参数,其中35B个参数处于活动状态。
  • zephyr:7b:原始Zephyr模型

来源