DeepSeek V3 · SWE-bench Verified · Agent mode; task snapshot unspecified · 历代记录

按发布时间查看 DeepSeek V3 的 3 次发布在 SWE-bench Verified · Agent mode; task snapshot unspecified 的成绩、配置与披露。

仅为直接前代间的唯一、有效精确值计算差值,要求单位、指标与明确记录的配置和条件一致。

DeepSeek-V3

· 本次发布有 1 条成绩记录,含 1 条精确值(可含历史记录)

DeepSeek-V3 · SWE-bench Verified 成绩与配置
指标与成绩配置与评测条件出处
Resolved42%原文 42 · 单位 %
公布 未确认
DeepSeek-V3 Chat
设置
Chat checkpoint; source table limits output to 8K and repeats benchmarks under the card protocol.
未知项
Exact temperature for each row is not stated in the table.
工具
工具条件未记录
推理预算
输出上限 8192 tokens
框架
未记录
协议
未说明
条件
Chat-model standard benchmarks; source note states output length limited to 8K.
在排名中查看此成绩

DeepSeek-V3.1

· 本次发布有 1 条成绩记录,含 1 条精确值(可含历史记录)

DeepSeek-V3.1 · SWE-bench Verified 成绩与配置
指标与成绩配置与评测条件出处
Resolved66%原文 66 · 单位 %
公布 未确认
DeepSeek-V3.1-NonThinking
设置
Non-thinking mode as named in the official table.
未知项
未另记
工具
工具条件未记录
推理预算
未记录
框架
未记录
协议
未说明
条件
SWE Verified (Agent mode)
在排名中查看此成绩

DeepSeek-V3.1-Terminus

· 本次发布有 1 条成绩记录,含 1 条精确值(可含历史记录)

与直接前代的记录缺少满足差值计算的同条件依据。

DeepSeek-V3.1-Terminus · SWE-bench Verified 成绩与配置
指标与成绩配置与评测条件出处
Resolved68.4%原文 68.4 · 单位 %
公布 未确认
DeepSeek-V3.1-Terminus reported comparison
设置
The table does not specify an effort setting; search-agent template/tool-set changed as stated in the card.
未知项
Do not infer a reasoning mode from the predecessor comparison.
工具
工具条件未记录
推理预算
未记录
框架
未记录
协议
未说明
条件
Metric/harness not restated in this comparison table.
在排名中查看此成绩