DeepSeek-V3 · MMLU-Pro(DeepSeek card version unspecified; Exact Match) 75.9% · 主文证据(ev-v3-003)
DeepSeek-V3 的 MMLU-Pro · DeepSeek card version unspecified; Exact Match 官方出处。DeepSeek-V3 Chat · 75.9%。见《DeepSeek-V3 official Hugging Face model card》Official model card / table headed “| | **Benchmark (Metric)** | **DeepSeek V2-0506** | **DeepSeek V2.5-0905** | **Qwen2.5 72B-Inst.** | **Llama3.1 405B-Inst.** | **Claude-3.5-Sonnet-1022** | **GPT-4o 0513** | **DeepSeek V3** |” / complete row containing “| | MMLU-Pro (EM) | 58.5 | 66.2 | 71.6 | 73.3 | **78.0** | 72.6 | 75.9 |”。证据 ev-v3-003。
原文与定位
DeepSeek-V3 · MMLU-Pro(DeepSeek card version unspecified; Exact Match),DeepSeek-V3 Chat配置,Exact Match 75.9%(具体成绩公布时间未确认)。见《DeepSeek-V3 official Hugging Face model card》Official model card / table headed “| | **Benchmark (Metric)** | **DeepSeek V2-0506** | **DeepSeek V2.5-0905** | **Qwen2.5 72B-Inst.** | **Llama3.1 405B-Inst.** | **Claude-3.5-Sonnet-1022** | **GPT-4o 0513** | **DeepSeek V3** |” / complete row containing “| | MMLU-Pro (EM) | 58.5 | 66.2 | 71.6 | 73.3 | **78.0** | 72.6 | 75.9 |”。 查看成绩条件
| | **Benchmark (Metric)** | **DeepSeek V2-0506** | **DeepSeek V2.5-0905** | **Qwen2.5 72B-Inst.** | **Llama3.1 405B-Inst.** | **Claude-3.5-Sonnet-1022** | **GPT-4o 0513** | **DeepSeek V3** | | | MMLU-Pro (EM) | 58.5 | 66.2 | 71.6 | 73.3 | **78.0** | 72.6 | 75.9 |
- 官方材料
- DeepSeek-V3 official Hugging Face model card
- 定位
- 主文 · Official model card / table headed “| | **Benchmark (Metric)** | **DeepSeek V2-0506** | **DeepSeek V2.5-0905** | **Qwen2.5 72B-Inst.** | **Llama3.1 405B-Inst.** | **Claude-3.5-Sonnet-1022** | **GPT-4o 0513** | **DeepSeek V3** |” / complete row containing “| | MMLU-Pro (EM) | 58.5 | 66.2 | 71.6 | 73.3 | **78.0** | 72.6 | 75.9 |”
- 材料版本
- HF revision e815299b0bcbac849fa540c768ef21845365c9eb; current card snapshot
- 版本公布
- 未确认
- 披露时间
- 未确认 · 首发/后补未确认
- 采集时间
- 历史依据
- 暂无可靠历史版本依据
引用文本
DeepSeek-V3 · MMLU-Pro(DeepSeek card version unspecified; Exact Match),DeepSeek-V3 Chat配置,Exact Match 75.9%(具体成绩公布时间未确认)。官方出处 DeepSeek-V3 official Hugging Face model card(主文,HF revision e815299b0bcbac849fa540c768ef21845365c9eb; current card snapshot)Official model card / table headed “| | **Benchmark (Metric)** | **DeepSeek V2-0506** | **DeepSeek V2.5-0905** | **Qwen2.5 72B-Inst.** | **Llama3.1 405B-Inst.** | **Claude-3.5-Sonnet-1022** | **GPT-4o 0513** | **DeepSeek V3** |” / complete row containing “| | MMLU-Pro (EM) | 58.5 | 66.2 | 71.6 | 73.3 | **78.0** | 72.6 | 75.9 |”,https://huggingface.co/deepseek-ai/DeepSeek-V3。Benchlog https://benchlog.lekshome.cc/evidence/v3/ev-v3-003/
关联成绩与条件
| 指标与成绩 | 配置与评测条件 | 证据关系 |
|---|---|---|
| Exact Match75.9%原文 75.9 · 单位 % 公布 未确认 | DeepSeek-V3 Chat
| 直接支持该成绩 在排名中查看此成绩 |