Athene-V2 是一个 720 亿参数的模型,擅长代码补全、数学和日志提取任务。

工具 72b

70K 2 个月前

自述文件

Athene-V2

Nexusflow 的 Athene-V2 聊天模型,基于 Qwen 2.5 的 720 亿基础模型构建,在关键基准测试中实现了 GPT-4o 级别的性能,同时展示了有针对性的优化如何增强特定能力,超越传统的扩展方法。

模型特点

  • 720 亿参数,基于 Qwen 2.5 微调
  • 最先进的聊天性能,与 GPT-4o 相当或超越 GPT-4o
  • 卓越的代码补全能力(在 bigcode-bench-hard 上排名第 2)
  • 增强的数学能力(MATH 基准测试)
  • 精确的长格式日志提取
  • 先进的后训练流程,推动帕累托前沿

参考资料

博客文章

HuggingFace