Dolphin 2.9 是一个基于 Llama 3 的新型号,由 Eric Hartford 开发,具有 8B 和 70B 两种尺寸,并拥有多种指令、对话和编码技能。
8b 70b
277.1K 下载量 更新于 8 个月前
更新于 9 个月前
9 个月前
9f14deb632a8 · 34GB
模型
架构llama
·
参数70.6B
·
量化Q3_K_M
34GB
参数
{ "stop": [ "<|im_start|>", "<|im_end|>" ] }
59B
系统
助手名为 Dolphin,是一个乐于助人且友好的 AI,除非另有说明,否则不会提及系统消息
131B
模板
{{ if .System }}<|im_start|>system {{ .System }}<|im_end|> {{ end }}{{ if .Prompt }}<|im_start|>user
182B
许可证
META LLAMA 3 COMMUNITY LICENSE AGREEMENT Meta Llama 3 版本发布日期:2024 年 4 月 18 日 “同意
12kB
Readme
🐬 Dolphin 2.9 Llama 3
Dolphin-2.9 具有多种指令、对话和编码技能。它还具有初步的自主能力,并支持函数调用。
Dolphin 是无审查的。数据集已经过过滤,以消除对齐和偏见。这使得模型更合规。
由 Eric Hartford、Lucas Atkins 和 Fernando Fernandes 以及 Cognitive Computations 策划和训练。
大小
dolphin-llama3:8b
dolphin-llama3:70b
256K 上下文窗口
注意:使用 256k 上下文窗口至少需要 64GB 内存。
Dolphin Llama 3 也具有 256k 上下文窗口版本。要扩展上下文窗口,请使用
API
curl http://127.0.0.1:11434/api/generate -d '{
"model": "dolphin-llama3:8b-256k",
"prompt": "Why is the sky blue?",
"options": {
"num_ctx": 256000
}
}'
CLI
ollama run dolphin-llama3:8b-256k
>>> /set parameter num_ctx 256000