Gemma 2 27B 评测成绩
来自 4 个来源、7 项基准的 7 条成绩。
开放权重 发布: 2024年6月24日 更新于 2026年10月22日
其他名称: gemma-2-27b-it · Gemma 2 Instruct (27B) · Gemma-2-27B-it · google/gemma-2-27b-it · google/gemma-2-27b
全部评测成绩
| 基准 | 分数 | 名次 | 设定 | 来源类型 | 日期 |
|---|---|---|---|---|---|
| LMArena Text | 1289 | 291 | Overall, style control on; 75754 votes; 95% CI 1286–1293“gemma-2-27b-it” | 官方榜单 | 2026年10月8日 |
| Open LLM Leaderboard v2 | 36.2% | 555 | Average of 6 normalised benchmarks; bfloat16; 27.227B params“google/gemma-2-27b-it” | 官方榜单 | 2025年3月13日 |
| GPQA Diamond | 36.5% | 245 | Epoch AI run, accuracy | 独立评测 | 2025年1月27日 |
| MMLU | 75.7% | 38 | Exact match; 5-shot | 官方榜单 via Epoch AI | 2024年6月24日 |
| MMLU-Pro | 56.5% | 149 | Overall accuracy; data source: TIGER-Lab; 27B“Gemma-2-27B-it” | 官方榜单 | 2026年3月11日 |
| AIME (OTIS Mock AIME 2024–2025) | 1.4% | 254 | Epoch AI run, OTIS Mock AIME 2024–2025 | 独立评测 | 2025年3月7日 |
| MATH Level 5 | 27.9% | 77 | Epoch AI run, accuracy | 独立评测 | 2025年1月27日 |
常见问题
Gemma 2 27B 的这些评测分数来自哪里？
来自 Epoch AI Benchmarking Hub、LMArena leaderboard dataset、MMLU-Pro leaderboard (TIGER-Lab)和Hugging Face Open LLM Leaderboard v2 (archived)。每一行都链接到原始榜单、数据集或报告，厂商自报的分数单独标注。