由 Mistral AI 与 NVIDIA 合作构建的先进的 12B 模型,具有 128k 上下文长度。

工具 12b

1.1M 6 个月前

自述文件

Mistral NeMo 是一个由 Mistral AI 与 NVIDIA 合作构建的 12B 模型。Mistral NeMo 提供了高达 128k tokens 的大上下文窗口。其推理、世界知识和编码准确性在其尺寸类别中处于最先进水平。由于它依赖于标准架构,Mistral NeMo 易于使用,并且可以轻松替换任何使用 Mistral 7B 的系统。

nemo-base-performance.png

参考

博客

Hugging Face