Mistral AI
Mistral Large 2 (Jul 2024) 评测成绩
来自 3 个来源、6 项基准的 6 条成绩。
开放权重 发布: 2024年7月24日 更新于 2026年10月22日
其他名称: mistral-large-2407 · Mistral Large 2 (2407) · Mistral-Large-Instruct-2407
全部评测成绩
| 基准 | 分数 | 名次 | 设定 | 来源类型 | 日期 |
|---|---|---|---|---|---|
| LMArena Text | 1314 | 267 | Overall, style control on; 45459 votes; 95% CI 1310–1318“mistral-large-2407” | 官方榜单 | 2026年10月8日 |
| GPQA Diamond | 49.0% | 208 | Epoch AI run, accuracy | 独立评测 | 2025年1月27日 |
| MMLU | 80.0% | 18 | Exact match; 5-shot | 官方榜单 via Epoch AI | 2024年7月24日 |
| MMLU-Pro | 65.9% | 116 | Overall accuracy; data source: TIGER-Lab; 123B“Mistral-Large-Instruct-2407” | 官方榜单 | 2026年3月11日 |
| AIME (OTIS Mock AIME 2024–2025) | 8.5% | 216 | Epoch AI run, OTIS Mock AIME 2024–2025 | 独立评测 | 2025年2月25日 |
| MATH Level 5 | 44.8% | 66 | Epoch AI run, accuracy | 独立评测 | 2025年1月27日 |
常见问题
Mistral Large 2 (Jul 2024) 的这些评测分数来自哪里？
来自 Epoch AI Benchmarking Hub、LMArena leaderboard dataset和MMLU-Pro leaderboard (TIGER-Lab)。每一行都链接到原始榜单、数据集或报告，厂商自报的分数单独标注。