Databricks
DBRX 评测成绩
来自 3 个来源、5 项基准的 7 条成绩。
开放权重 发布: 2024年3月27日 更新于 2026年10月22日
其他名称: dbrx-instruct · DBRX Instruct · databricks/dbrx-instruct · databricks/dbrx-base
全部评测成绩
| 基准 | 分数 | 名次 | 设定 | 来源类型 | 日期 |
|---|---|---|---|---|---|
| Open LLM Leaderboard v2 | 25.2% | 1607 | Average of 6 normalised benchmarks; bfloat16; 131.597B params“databricks/dbrx-instruct” | 官方榜单 | 2025年3月13日 |
| Open LLM Leaderboard v2 | 16.4% | 3156 | Average of 6 normalised benchmarks; float16“databricks/dbrx-base” | 官方榜单 | 2025年3月13日 |
| GPQA Diamond | 32.9% | 256 | Epoch AI run, accuracy | 独立评测 | 2025年1月27日 |
| MMLU | 74.1% | 42 | Exact match; 5-shot“DBRX Instruct” | 官方榜单 via Epoch AI | — |
| HumanEval / HumanEval+ | 75.0% | 32 | HumanEval (base tests), pass@1 greedy“databricks/dbrx-instruct” | 官方榜单 | 2024年12月26日 |
| HumanEval / HumanEval+ | 70.1% | 32 | HumanEval+ (extended tests), pass@1 greedy“databricks/dbrx-instruct” | 官方榜单 | 2024年12月26日 |
| MATH Level 5 | 11.7% | 95 | Epoch AI run, accuracy | 独立评测 | 2025年1月27日 |
常见问题
DBRX 的这些评测分数来自哪里？
来自 Epoch AI Benchmarking Hub、EvalPlus leaderboard和Hugging Face Open LLM Leaderboard v2 (archived)。每一行都链接到原始榜单、数据集或报告，厂商自报的分数单独标注。