Claude Opus 4.8 · ChartMuseum · 1,162 test-split questions · 成绩与配置

Claude Opus 4.8 的 ChartMuseum · 1,162 test-split questions 记录。本次发布有 2 条成绩记录,含 2 条精确值(可含历史记录),附 2 条来源定位。

成绩与评测条件

Claude Opus 4.8 · ChartMuseum 成绩与配置
指标与成绩配置与评测条件出处
Accuracy75.8%原文 75.8% · 单位 %
公布 未确认
视觉基准无工具
设置
Adaptive thinking、max effort、无工具;各图表注明时平均 5 runs,95% CI。
未知项
未另记
工具
禁止工具
推理预算
max
框架
未记录
协议
ChartMuseum test split, 1,162 expert-annotated questions; average over 5 runs.
条件
Adaptive thinking/max effort, no tools. Internal implementation follows public prompts but uses Claude Sonnet 4.6 grader instead of GPT-4.1-mini; retain grader/config as a distinct comparison.
在排名中查看此成绩
Accuracy89.7%原文 89.7% · 单位 %
公布 未确认
视觉基准 Python 工具
设置
Adaptive thinking、max effort、Python tools;各图表注明时平均 5 runs,95% CI。
未知项
未另记
工具
允许工具
推理预算
max
框架
未记录
协议
ChartMuseum test split, 1,162 expert-annotated questions; average over 5 runs.
条件
Adaptive thinking/max effort with Python tools. Internal implementation uses Claude Sonnet 4.6 grader instead of GPT-4.1-mini; retain grader/config as a distinct comparison.
在排名中查看此成绩

出处与披露

测试版本与指标

别名 ChartMuseum

  • Accuracy · % · 越高越好