Starling是一个大型语言模型,通过基于人工智能反馈的强化学习进行训练,专注于提升聊天机器人的帮助性。

7b

63.9K 8个月前

自述文件

Starling-7B是一个开放的(非商业)大型语言模型(LLM),通过基于人工智能反馈的强化学习 (RLAIF) 进行训练。

该模型利用了我们新的GPT-4标记排序数据集Nectar以及我们新的奖励训练和策略调整管线。在使用GPT-4作为评判标准的MT Bench测试中,Starling-7B-alpha得分为8.09,其性能优于MT-Bench上迄今为止的所有模型,仅次于OpenAI的GPT-4和GPT-4 Turbo。

*基于MT Bench评估,使用GPT-4评分。需要进一步的人工评估。

作者:朱邦华、Evan Frick、吴天昊、朱寒林和焦建涛。

如需联系,请联系朱邦华 ([email protected])。

参考文献

Starling-7B:使用RLAIF提高LLM的帮助性和无害性

HuggingFace