Claude Opus · MCP-Atlas · 所选材料未明确子集 · 历代记录

按发布时间查看 Claude Opus 的 3 次发布在 MCP-Atlas · 所选材料未明确子集 的成绩、配置与披露。

仅为直接前代间的唯一、有效精确值计算差值,要求单位、指标与明确记录的配置和条件一致。

Claude Opus 4.5

· 本次发布有 1 条成绩记录,含 1 条精确值(可含历史记录)

Claude Opus 4.5 · MCP-Atlas 成绩与配置
指标与成绩配置与评测条件出处
Score62.3%原文 62.3% · 单位 %
公布 未确认
No extended thinking
设置
Extended thinking off; 200K context and default sampling are stated for MCP Atlas; Table 2.3.A applies its no-thinking footnote to MCP Atlas, τ² Retail and τ² Telecom.
未知项
The system card does not state an independent effort level for these no-thinking evaluations.
工具
工具条件未记录
推理预算
未记录
框架
未记录
协议
MCP Atlas;主表未说明题集/调用预算。
条件
No extended thinking; 200K context; default temperature/top_p; 5-trial average per Table 2.3.A.
在排名中查看此成绩

Claude Opus 4.6

· 本次发布有 2 条成绩记录,含 2 条精确值(可含历史记录)

与直接前代的记录缺少满足差值计算的同条件依据。

Claude Opus 4.6 · MCP-Atlas 成绩与配置
指标与成绩配置与评测条件出处
Score59.5%原文 59.5% · 单位 %
公布 未确认
MCP Atlas Max effort
设置
官方脚注明确主表 MCP Atlas 运行使用 max effort。
未知项
未另记
工具
工具条件未记录
推理预算
max
框架
未记录
协议
MCP Atlas;主表未明确 leaderboard 子集。
条件
MCP-Atlas;max effort;与 high-effort 结果分列;卡片未指出 leaderboard 子集或试验数。
在排名中查看此成绩
Score62.7%原文 62.7% · 单位 %
公布 未确认
MCP Atlas High effort
设置
官方脚注另报 high-effort 结果。
未知项
未另记
工具
工具条件未记录
推理预算
high
框架
未记录
协议
MCP Atlas;high effort。
条件
MCP-Atlas;High effort;与 max-effort 结果分列;卡片未指出 leaderboard 子集或试验数。
在排名中查看此成绩

Claude Opus 5

· 本次发布有 2 条成绩记录,含 2 条精确值(可含历史记录)

Claude Opus 5 · MCP-Atlas 成绩与配置
指标与成绩配置与评测条件出处
Pass rate85.8%原文 85.8% · 单位 %
公布 未确认
MCP-Atlas · reported production evaluation
设置
Multi-step MCP workflows on production-like servers; the card reports 85.8% pass rate and 89.1% mean claim coverage, and warns that effort settings may since have changed.
未知项
Effort and run count are not stated; the score may not be precisely reproducible.
工具
允许工具
推理预算
未记录
框架
未记录
协议
MCP-Atlas; multi-step MCP workflows.
条件
Reported effort may have changed since evaluation; the card says the score may not be precisely reproducible.
在排名中查看此成绩
Mean claim coverage89.1%原文 89.1% · 单位 %
公布 未确认
MCP-Atlas · reported production evaluation
设置
Multi-step MCP workflows on production-like servers; the card reports 85.8% pass rate and 89.1% mean claim coverage, and warns that effort settings may since have changed.
未知项
Effort and run count are not stated; the score may not be precisely reproducible.
工具
允许工具
推理预算
未记录
框架
未记录
协议
MCP-Atlas; mean claim coverage.
条件
Reported effort may have changed since evaluation; the card says the score may not be precisely reproducible.
在排名中查看此成绩