Claude Opus · LAB-Bench FigQA · FutureHouse FigQA; prompting and tools are recorded per result · 历代记录

按发布时间查看 Claude Opus 的 4 次发布在 LAB-Bench FigQA · FutureHouse FigQA; prompting and tools are recorded per result 的成绩、配置与披露。

仅为直接前代间的唯一、有效精确值计算差值,要求单位、指标与明确记录的配置和条件一致。

Claude Opus 4.5

· 本次发布有 2 条成绩记录,含 2 条精确值(可含历史记录)

Claude Opus 4.5 · LAB-Bench FigQA 成绩与配置
指标与成绩配置与评测条件出处
Score54.9%原文 54.9% · 单位 %
公布 未确认
LAB-Bench FigQA, no tools
设置
Extended thinking off; no tools; zero-shot prompting.
未知项
Trial count is not stated.
工具
禁止工具
推理预算
未记录
框架
未记录
协议
LAB-Bench FigQA; zero-shot prompting; 95% confidence interval shown in the figure.
条件
No tools; extended thinking off.
在排名中查看此成绩
Score69.2%原文 69.2% · 单位 %
公布 未确认
LAB-Bench FigQA, image cropping tool
设置
Simple image cropping tool; 32,768 reasoning-token budget; zero-shot prompting.
未知项
Trial count is not stated.
工具
允许工具
推理预算
思考预算 32,768
框架
未记录
协议
LAB-Bench FigQA; zero-shot prompting; 95% confidence interval shown in the figure.
条件
Simple image cropping tool; 32,768 reasoning-token budget.
在排名中查看此成绩

Claude Opus 4.6

· 本次发布有 2 条成绩记录,含 2 条精确值(可含历史记录)

与直接前代的记录缺少满足差值计算的同条件依据。

Claude Opus 4.6 · LAB-Bench FigQA 成绩与配置
指标与成绩配置与评测条件出处
Score58%原文 58.0% · 单位 %
公布 未确认
Max · 无工具
设置
Adaptive thinking、Max effort、无工具;sampling 使用默认 temperature 与 top_p。
未知项
未另记
工具
禁止工具
推理预算
max
框架
未记录
协议
LAB-Bench FigQA;without tools。
条件
Adaptive thinking、max effort、5-run average。
在排名中查看此成绩
Score78.3%原文 78.3% · 单位 %
公布 未确认
Max · 图像裁切工具
设置
Adaptive thinking、Max effort;允许简单 image-cropping tool;每项评测条件见成绩记录。
未知项
未另记
工具
允许工具
推理预算
max
框架
未记录
协议
LAB-Bench FigQA;simple image-cropping tool。
条件
Adaptive thinking、max effort、5-run average。
在排名中查看此成绩

Claude Opus 4.7

· 本次发布有 4 条成绩记录,含 4 条精确值(可含历史记录)

与直接前代的记录缺少满足差值计算的同条件依据。

Claude Opus 4.7 · LAB-Bench FigQA 成绩与配置
指标与成绩配置与评测条件出处
Score78.6%原文 78.6% · 单位 %
公布 未确认
LAB-Bench FigQA,无工具
设置
Adaptive thinking, max effort; no tools; 5-run average; current maximum image resolution (2576px single dimension, 3.75MP total).
未知项
未另记
工具
禁止工具
推理预算
max
框架
未记录
协议
LAB-Bench FigQA; no tools.
条件
Adaptive thinking, max effort; five-run average; current image limit 2576px on one dimension and 3.75MP total.
在排名中查看此成绩
Score86.4%原文 86.4% · 单位 %
公布 未确认
LAB-Bench FigQA,Python工具
设置
Adaptive thinking, max effort; Python tools; 5-run average; current maximum image resolution (2576px single dimension, 3.75MP total).
未知项
未另记
工具
允许工具
推理预算
max
框架
未记录
协议
LAB-Bench FigQA; Python tools.
条件
Adaptive thinking, max effort; five-run average; current image limit 2576px on one dimension and 3.75MP total.
在排名中查看此成绩
Score74%原文 74.0% · 单位 %
公布 未确认
LAB-Bench FigQA,无工具,旧分辨率
设置
Adaptive thinking, max effort; no tools; 5-run average; old image limit (1568px single dimension, 1.15MP total).
未知项
未另记
工具
禁止工具
推理预算
max
框架
未记录
协议
LAB-Bench FigQA; no tools; adaptive thinking; max effort; old image resolution.
条件
Five-run average; image maximum 1568px on one dimension and 1.15MP total. Separate resolution ablation, not the current-resolution 78.6% result.
在排名中查看此成绩
Score85.8%原文 85.8% · 单位 %
公布 未确认
LAB-Bench FigQA,Python工具,旧分辨率
设置
Adaptive thinking, max effort; Python tools; 5-run average; old image limit (1568px single dimension, 1.15MP total).
未知项
未另记
工具
允许工具
推理预算
max
框架
未记录
协议
LAB-Bench FigQA; Python tools; adaptive thinking; max effort; old image resolution.
条件
Five-run average; image maximum 1568px on one dimension and 1.15MP total. Separate resolution ablation, not the current-resolution 86.4% result.
在排名中查看此成绩

Claude Opus 4.8

· 本次发布有 2 条成绩记录,含 2 条精确值(可含历史记录)

与直接前代的记录缺少满足差值计算的同条件依据。

Claude Opus 4.8 · LAB-Bench FigQA 成绩与配置
指标与成绩配置与评测条件出处
Score80.4%原文 80.4% · 单位 %
公布 未确认
视觉基准无工具
设置
Adaptive thinking、max effort、无工具;各图表注明时平均 5 runs,95% CI。
未知项
未另记
工具
禁止工具
推理预算
max
框架
未记录
协议
LAB-Bench FigQA public set, 181 questions; average over 5 runs; figure uses new grader.
条件
Adaptive thinking/max effort, no tools. Proposed catalog ID; do not merge with LABBench2 overall/category score.
在排名中查看此成绩
Score87.3%原文 87.3% · 单位 %
公布 未确认
视觉基准 Python 工具
设置
Adaptive thinking、max effort、Python tools;各图表注明时平均 5 runs,95% CI。
未知项
未另记
工具
允许工具
推理预算
max
框架
未记录
协议
LAB-Bench FigQA public set, 181 questions; average over 5 runs; figure uses new grader.
条件
Adaptive thinking/max effort with Python tools. Proposed catalog ID; do not merge with LABBench2 overall/category score.
在排名中查看此成绩