everythinglm

基于未经审查的 Llama2 的模型，支持 16K 上下文窗口。

13b

31.5K 10 个月前

18 个标签

自述文件

Everything Language Model 是一个基于 Llama 2 的模型，它具有 Totally Not An LLM (Kai Howard) 发布的 16k 上下文。 它使用 EverythingLM 数据集 进行训练，并且未经审查。

CLI

ollama run everythinglm

加载后，将上下文大小更改为 16K

/set parameter num_ctx 16384

API

示例

curl -X POST https://127.0.0.1:11434/api/generate -d '{
  "model": "everythinglm",
  "prompt": "Why is the sky blue?"
  "options": {
    "num_ctx": 16384
  }
 }'

参考

13b 参数原始来源： Totally Not An LLM