nemotron:70b-instruct-q5_K_S - Ollama 框架

nemotron

Llama-3.1-Nemotron-70B-Instruct 是一个由 NVIDIA 定制的大型语言模型，旨在提高 LLM 生成的回复对用户查询的帮助性。

工具 70b

60.7K 下载量更新于 3 个月前

更新于 3 个月前

3 个月前

c5dfebb28f5f · 49GB

parameters70.6B

quantizationQ5_K_S

{ "stop": [ "<|start_header_id|>", "<|end_header_id|>", "<|eot_id|>"

<|start_header_id|>system<|end_header_id|> {{ if .Tools }}You have access to the following function

# Llama 3.1 Acceptable Use Policy Meta is committed to promoting safe and fair use of its tools and

LLAMA 3.1 COMMUNITY LICENSE AGREEMENT Llama 3.1 Version Release Date: July 23, 2024 “Agreement”

Readme

Llama-3.1-Nemotron-70B-Instruct 是一个由 NVIDIA 定制的大型语言模型，旨在提高 LLM 生成的回复对用户查询的帮助性。

此模型使用 RLHF (特别是 REINFORCE), Llama-3.1-Nemotron-70B-Reward 和 HelpSteer2-Preference prompts 在 Llama-3.1-70B-Instruct 模型作为初始策略训练。

$ ollama run nemotron
>>> How many r in strawberry?
A sweet question!

Let's count the "R"s in "strawberry":

1. S
2. T
3. R
4. A
5. W
6. B
7. E
8. R
9. R
10. Y

There are **3** "R"s in the word "strawberry".

参考