Llama 3.1 是 Meta 推出的一个新的最先进模型,提供 8B、70B 和 405B 三种参数规模。
工具 8b 70b 405b
8.8M 拉取 更新 8 周前
更新于 8 周前
8 周前
80d34437631f · 141GB
模型
架构llama
·
参数70.6B
·
量化F16
141GB
参数
{"stop":["\u003c|start_header_id|\u003e","\u003c|end_header_id|\u003e","\u003c|eot_id|\u003e"]}
96B
模板
{{- if or .System .Tools }}<|start_header_id|>system<|end_header_id|> {{- if .System }} {{ .System
1.5kB
许可证
LLAMA 3.1 社区许可协议 Llama 3.1 版本发布日期:2024 年 7 月 23 日 “协议”
12kB
自述文件
Meta Llama 3.1
Llama 3.1 模型系列
- 8B
- 70B
- 405B
Llama 3.1 405B 是第一个公开提供的模型,在通用知识、可控性、数学、工具使用和多语言翻译方面,其能力已与顶级 AI 模型相媲美。
升级版的 8B 和 70B 模型支持多种语言,具有 128K 的显著更长的上下文长度,最先进的工具使用能力,以及更强大的推理能力。这使得 Meta 的最新模型能够支持高级用例,例如长篇文本摘要、多语言对话代理和编码助手。
Meta 还对其许可证进行了更改,允许开发者使用 Llama 模型(包括 405B 模型)的输出结果来改进其他模型。
模型评估
对于此次发布,Meta 对超过 150 个基准数据集进行了评估,这些数据集涵盖了广泛的语言。此外,Meta 还进行了广泛的人工评估,将 Llama 3.1 与现实世界场景中的竞争模型进行比较。Meta 的实验评估表明,我们的旗舰模型在包括 GPT-4、GPT-4o 和 Claude 3.5 Sonnet 在内的各种任务中,与领先的基础模型具有竞争力。此外,Meta 的小型模型与具有类似参数数量的封闭和开放模型具有竞争力。