nemotron:70b-instruct-q2_K - Ollama 框架

nemotron

Llama-3.1-Nemotron-70B-Instruct 是一个大型语言模型，由 NVIDIA 定制，旨在提高 LLM 生成的回复对用户查询的 helpfulness (帮助性)。

工具 70b

60.7K 下载次数更新于 3 个月前

更新于 3 个月前

3 个月前

f4743c4c6e52 · 26GB

parameters70.6B

quantizationQ2_K

{ "stop": [ "<|start_header_id|>", "<|end_header_id|>", "<|eot_id|>"

<|start_header_id|>system<|end_header_id|> {{ if .Tools }}You have access to the following function

# Llama 3.1 Acceptable Use Policy Meta is committed to promoting safe and fair use of its tools and

LLAMA 3.1 COMMUNITY LICENSE AGREEMENT Llama 3.1 Version Release Date: July 23, 2024 “Agreement”

自述文件

Llama-3.1-Nemotron-70B-Instruct 是一个大型语言模型，由 NVIDIA 定制，旨在提高 LLM 生成的回复对用户查询的 helpfulness (帮助性)。

此模型使用 RLHF (具体来说，是 REINFORCE)、Llama-3.1-Nemotron-70B-Reward 和 HelpSteer2-Preference prompts 在 Llama-3.1-70B-Instruct 模型上作为初始策略进行训练。

$ ollama run nemotron
>>> How many r in strawberry?
A sweet question!

Let's count the "R"s in "strawberry":

1. S
2. T
3. R
4. A
5. W
6. B
7. E
8. R
9. R
10. Y

There are **3** "R"s in the word "strawberry".

参考