DeepSeek-V3.1 · GPQA Diamond · Diamond subset; task snapshot unspecified · 成绩与配置
DeepSeek-V3.1 的 GPQA Diamond · Diamond subset; task snapshot unspecified 记录。本次发布有 2 条成绩记录,含 2 条精确值(可含历史记录),附 2 条来源定位。
成绩与评测条件
| 指标与成绩 | 配置与评测条件 | 出处 |
|---|---|---|
| Pass@174.9%原文 74.9 · 单位 % 公布 未确认 | DeepSeek-V3.1-NonThinking
| 在排名中查看此成绩 |
| Pass@180.1%原文 80.1 · 单位 % 公布 未确认 | DeepSeek-V3.1-Thinking
| 在排名中查看此成绩 |
出处与披露
- Official model card / table headed “| Category | Benchmark (Metric) | DeepSeek V3.1-NonThinking | DeepSeek V3 0324 | DeepSeek V3.1-Thinking | DeepSeek R1 0528” / complete row containing “| | GPQA-Diamond (Pass@1) | 74.9 | 68.4 | 80.1 | 81.0” 主文 · DeepSeek-V3.1 official Hugging Face model card
- Official model card / table headed “| Category | Benchmark (Metric) | DeepSeek V3.1-NonThinking | DeepSeek V3 0324 | DeepSeek V3.1-Thinking | DeepSeek R1 0528” / complete row containing “| | GPQA-Diamond (Pass@1) | 74.9 | 68.4 | 80.1 | 81.0” 主文 · DeepSeek-V3.1 official Hugging Face model card
测试版本与指标
- Pass@1 · % · 越高越好