DeepSeek V3 · GPQA Diamond · Diamond subset; task snapshot unspecified · 历代记录
按发布时间查看 DeepSeek V3 的 4 次发布在 GPQA Diamond · Diamond subset; task snapshot unspecified 的成绩、配置与披露。
仅为直接前代间的唯一、有效精确值计算差值,要求单位、指标与明确记录的配置和条件一致。
DeepSeek-V3
· 本次发布有 1 条成绩记录,含 1 条精确值(可含历史记录)
| 指标与成绩 | 配置与评测条件 | 出处 |
|---|---|---|
| Pass@159.1%原文 59.1 · 单位 % 公布 未确认 | DeepSeek-V3 Chat
| 在排名中查看此成绩 |
- Official model card / table headed “| | **Benchmark (Metric)** | **DeepSeek V2-0506** | **DeepSeek V2.5-0905** | **Qwen2.5 72B-Inst.** | **Llama3.1 405B-Inst.** | **Claude-3.5-Sonnet-1022** | **GPT-4o 0513** | **DeepSeek V3** |” / complete row containing “| | GPQA-Diamond (Pass@1) | 35.3 | 41.3 | 49.0 | 51.1 | **65.0** | 49.9 | 59.1 |” 主文 · DeepSeek-V3 official Hugging Face model card
DeepSeek-V3.1
· 本次发布有 2 条成绩记录,含 2 条精确值(可含历史记录)
| 指标与成绩 | 配置与评测条件 | 出处 |
|---|---|---|
| Pass@174.9%原文 74.9 · 单位 % 公布 未确认 | DeepSeek-V3.1-NonThinking
| 在排名中查看此成绩 |
| Pass@180.1%原文 80.1 · 单位 % 公布 未确认 | DeepSeek-V3.1-Thinking
| 在排名中查看此成绩 |
- Official model card / table headed “| Category | Benchmark (Metric) | DeepSeek V3.1-NonThinking | DeepSeek V3 0324 | DeepSeek V3.1-Thinking | DeepSeek R1 0528” / complete row containing “| | GPQA-Diamond (Pass@1) | 74.9 | 68.4 | 80.1 | 81.0” 主文 · DeepSeek-V3.1 official Hugging Face model card
- Official model card / table headed “| Category | Benchmark (Metric) | DeepSeek V3.1-NonThinking | DeepSeek V3 0324 | DeepSeek V3.1-Thinking | DeepSeek R1 0528” / complete row containing “| | GPQA-Diamond (Pass@1) | 74.9 | 68.4 | 80.1 | 81.0” 主文 · DeepSeek-V3.1 official Hugging Face model card
DeepSeek-V3.1-Terminus
· 本次发布有 1 条成绩记录,含 1 条精确值(可含历史记录)
与直接前代的记录缺少满足差值计算的同条件依据。
| 指标与成绩 | 配置与评测条件 | 出处 |
|---|---|---|
| Pass@180.7%原文 80.7 · 单位 % 公布 未确认 | DeepSeek-V3.1-Terminus reported comparison
| 在排名中查看此成绩 |
- Official model card / table headed “| Benchmark | DeepSeek-V3.1 | DeepSeek-V3.1-Terminus |” / complete row containing “| GPQA-Diamond | 80.1 | 80.7 |” 主文 · DeepSeek-V3.1-Terminus official Hugging Face model card
DeepSeek-V3.2-Exp
· 本次发布有 1 条成绩记录,含 1 条精确值(可含历史记录)
与直接前代的记录缺少满足差值计算的同条件依据。
| 指标与成绩 | 配置与评测条件 | 出处 |
|---|---|---|
| Pass@179.9%原文 79.9 · 单位 % 公布 未确认 | DeepSeek-V3.2-Exp reasoning mode without tool use
| 在排名中查看此成绩 |
- Official model card / table headed “| Benchmark | DeepSeek-V3.1-Terminus | DeepSeek-V3.2-Exp |” / complete row containing “| GPQA-Diamond | 80.7 | 79.9 |” 主文 · DeepSeek-V3.2-Exp official Hugging Face model card