Anthropic
Claude 3 Haiku 评测成绩
来自 5 个来源、9 项基准的 9 条成绩。
闭源 发布: 2024年3月7日 更新于 2026年10月22日
其他名称: claude-3-haiku-20240307 · Claude 3 Haiku (20240307) · Claude 3.5 Haiku · Tools + Claude 3.5 Haiku · Claude-3-Haiku · Claude-3-Haiku-20240307
全部评测成绩
| 基准 | 分数 | 名次 | 设定 | 来源类型 | 日期 |
|---|---|---|---|---|---|
| LMArena Text | 1262 | 315 | Overall, style control on; 117701 votes; 95% CI 1258–1265“claude-3-haiku-20240307” | 官方榜单 | 2026年10月8日 |
| LMArena Vision | 1000 | 149 | Overall, style control on; 13380 votes; 95% CI 988–1012“claude-3-haiku-20240307” | 官方榜单 | 2026年10月2日 |
| LiveCodeBench | 23.9% | 21 | Code generation, 182 problems dated 2025-01-01…2025-04-07“Claude-3-Haiku” | 官方榜单 | 2025年4月7日 |
| GPQA Diamond | 36.3% | 246 | Epoch AI run, accuracy | 独立评测 | 2025年1月27日 |
| MMLU | 73.8% | 45 | Exact match; 5-shot | 官方榜单 via Epoch AI | 2024年3月7日 |
| MMLU-Pro | 42.3% | 185 | Overall accuracy; data source: TIGER-Lab“Claude-3-Haiku-20240307” | 官方榜单 | 2026年3月11日 |
| SWE-bench Verified | 40.6% | 82 | agent: Tools“claude-3-haiku-20240307” | 官方榜单 | 2024年10月22日 |
| AIME (OTIS Mock AIME 2024–2025) | 1.8% | 252 | Epoch AI run, OTIS Mock AIME 2024–2025 | 独立评测 | 2025年2月25日 |
| MATH Level 5 | 14.9% | 92 | Epoch AI run, accuracy | 独立评测 | 2025年1月27日 |
常见问题
Claude 3 Haiku 的这些评测分数来自哪里?
来自 Epoch AI Benchmarking Hub、LiveCodeBench leaderboard、LMArena leaderboard dataset、MMLU-Pro leaderboard (TIGER-Lab)和SWE-bench leaderboards (swebench.com)。每一行都链接到原始榜单、数据集或报告,厂商自报的分数单独标注。