Claude Opus 4.8 · Humanity's Last Exam(2,500-question benchmark) 57.9% · 附件证据(ev-op48-card-hle-tools)

Claude Opus 4.8 的 Humanity's Last Exam · 2,500-question benchmark 官方出处。HLE 有工具 · 57.9%。见《Claude Opus 4.8 System Card》§8.10.1, PDF p.202。证据 ev-op48-card-hle-tools。

原文与定位

Claude Opus 4.8 · Humanity's Last Exam(2,500-question benchmark),HLE 有工具配置,Accuracy 57.9%(具体成绩公布时间未确认)。见《Claude Opus 4.8 System Card》§8.10.1, PDF p.202。 查看成绩条件

with web search, web fetch, programmatic tool calling, and code execution ... thinking was set to auto and the total tokens ... capped at 1M. Context compaction was not used.
官方材料
Claude Opus 4.8 System Card · PDF 第 202 页
定位
附件 · §8.10.1, PDF p.202
材料版本
当前保存副本:本地留存副本 与 current-opus-4-8-system-card.txt;PDF 246 页,封面日期 2026-05-28,修订记录最后明确日期 2026-06-17;当前 PDF 修订日期未知。此前来源记录 collectedAt 为 2026-11-11;当前副本于 2026-11-16 复核。
版本公布
未确认
披露时间
未确认 · 首发/后补未确认
采集时间
历史依据
暂无可靠历史版本依据
引用文本

Claude Opus 4.8 · Humanity's Last Exam(2,500-question benchmark),HLE 有工具配置,Accuracy 57.9%(具体成绩公布时间未确认)。官方出处 Claude Opus 4.8 System Card(附件,当前保存副本:本地留存副本 与 current-opus-4-8-system-card.txt;PDF 246 页,封面日期 2026-05-28,修订记录最后明确日期 2026-06-17;当前 PDF 修订日期未知。此前来源记录 collectedAt 为 2026-11-11;当前副本于 2026-11-16 复核。)§8.10.1, PDF p.202,https://www.anthropic.com/claude-opus-4-8-system-card#page=202。Benchlog https://benchlog.lekshome.cc/evidence/claude-opus-4-8/ev-op48-card-hle-tools/

关联成绩与条件

Claude Opus 4.8 · Humanity's Last Exam 成绩与配置
指标与成绩配置与评测条件证据关系
Accuracy57.9%原文 57.9% · 单位 %
公布 未确认
HLE 有工具
设置
Humanity’s Last Exam; web search, web fetch, programmatic tool calling and code execution; auto thinking and max effort; 1M total-token cap; no context compaction; Opus 4.6 transcript review/regrade for confirmed answer retrieval.
未知项
具体题集与试验数未列于主表。
工具
允许工具
推理预算
max
框架
未记录
协议
Humanity’s Last Exam with web search, web fetch, programmatic tool calling and code execution; auto thinking, max effort; 1M total-token cap; no context compaction.
条件
Opus 4.6 transcript review and regrade were used to confirm HLE answer retrieval.

直接支持该成绩

在排名中查看此成绩