Starling 是一个大型语言模型,通过来自 AI 反馈的强化学习进行训练,专注于提高聊天机器人的 helpfulness(乐于助人程度)。
7b
75.5K Pulls Updated 10 months ago
Updated 10 months ago
10 months ago
39153f619be6 · 4.1GB
model
archllama
·
parameters7.24B
·
quantizationQ4_0
4.1GB
params
{ "stop": [ "<|endoftext|>", "<|end_of_turn|>", "Human:", "Assis
87B
template
{{ if .System }}GPT4 Correct System: {{ .System }}<|end_of_turn|>{{ end }}{{ if .Prompt }}GPT4 Corre
200B
license
Apache License Version 2.0, January 2004
11kB
Readme
Starling-7B 是一个开放(非商业用途)的大型语言模型 (LLM),通过来自 AI 反馈的强化学习进行训练。(RLAIF)
该模型利用了我们新的 GPT-4 标记的排名数据集 Nectar,以及我们新的奖励训练和策略调整管道。Starling-7B-alpha 在 MT Bench 上使用 GPT-4 作为评判获得了 8.09 分,在 MT-Bench 上优于迄今为止的所有模型,除了 OpenAI 的 GPT-4 和 GPT-4 Turbo。
*基于 MT Bench 评估,使用 GPT-4 评分。 还需要进一步的人工评估。
作者:Banghua Zhu, Evan Frick, Tianhao Wu, Hanlin Zhu 和 Jiantao Jiao。
如有疑问,请联系 Banghua Zhu ([email protected])。