MathΣtral:Mistral AI 设计的用于数学推理和科学发现的 7B 模型。

7b

20.7K 3 个月前

自述文件

Mistral AI 正在将 Mathstral 贡献给科学界,以促进解决需要复杂、多步骤逻辑推理的先进数学问题的努力。Mathstral 的发布是他们更广泛支持学术项目努力的一部分——它是在 Mistral AI 与 Project Numina 合作的背景下产生的。

与牛顿在其时代一样,Mathstral 站在 Mistral 7B 的肩膀上,专门研究 STEM 领域。它在各种行业标准基准测试中在其规模类别中实现了最先进的推理能力。

mathstral-breakdown.png

基准测试

Mathstral 可以通过更多推理时间计算获得明显更好的结果:Mathstral 7B 在 MATH 上通过多数投票获得了 68.37% 的得分,在 64 个候选者中通过强大的奖励模型获得了 74.59% 的得分。

mathstral-benchmarks.png

参考文献

博客文章

Hugging Face