GLM-5.3 · NL2Repo(GLM-5.3模型卡;unknown) 58 · 主文证据(ev-gmc-glm-5-3-78)

GLM-5.3 的 NL2Repo · GLM-5.3模型卡;unknown 官方出处。GLM-5.3 · max · 58。见《GLM-5.3 official model card》Benchmark table;NL2Repo;GLM-5.3目标列。证据 ev-gmc-glm-5-3-78。

原文与定位

GLM-5.3 · NL2Repo(GLM-5.3模型卡;unknown),GLM-5.3 · max配置,Reported score 58(具体成绩公布时间未确认)。见《GLM-5.3 official model card》Benchmark table;NL2Repo;GLM-5.3目标列。 查看成绩条件

| Benchmark | GLM-5.3 | GLM-5.2 | Kimi K3 | DeepSeek-V4 Pro-0813 | Qwen3.8-Max | Opus 4.8 | Fable 5 (w/ fallback) | GPT-5.6 Sol | | NL2Repo | 58.0 | 48.9 | 58.0 | 61.1 | 55.9 | **69.7** | – | – | - **NL2Repo**: We evaluated NL2Repo with `temperature=1.0`, `top_p=1.0`, and `max_new_tokens=64k` under 1M context. To prevent hacking, we use rule-based and a LLM-based judgement to prevent malicious behaviors (e.g., unauthorized pip or curl operations). GLM-5.3 supports controlling the thinking budget through the `reasoning_effort` parameter, which accepts three levels: `low`, `high`, and `max`. It defaults to `max` if not passed (or if set to any other value). To use `low` or `high`, pass them explicitly. For benchmark and leaderboard reproduction, keep the default `max`.
官方材料
GLM-5.3 official model card
定位
主文 · Benchmark table;NL2Repo;GLM-5.3目标列
材料版本
本地2026-11-17官方卡片快照;2026-11-18完整目标列、内嵌图和原文脚注核对完成。
版本公布
未确认
披露时间
未确认 · 首发/后补未确认
采集时间
历史依据
暂无可靠历史版本依据
引用文本

GLM-5.3 · NL2Repo(GLM-5.3模型卡;unknown),GLM-5.3 · max配置,Reported score 58(具体成绩公布时间未确认)。官方出处 GLM-5.3 official model card(主文,本地2026-11-17官方卡片快照;2026-11-18完整目标列、内嵌图和原文脚注核对完成。)Benchmark table;NL2Repo;GLM-5.3目标列,https://huggingface.co/zai-org/GLM-5.3/blob/main/README.md。Benchlog https://benchlog.lekshome.cc/evidence/glm-5.3/ev-gmc-glm-5-3-78/

关联成绩与条件

GLM-5.3 · NL2Repo 成绩与配置
指标与成绩配置与评测条件证据关系
Reported score58原文 58.0 · 单位 未标注
公布 未确认
GLM-5.3 · max
设置
官方模型卡目标列;逐行scaffold、工具、采样及预算条件见protocol。来源把benchmark复现明确绑定max或行内明确reasoning_effort=max。
未知项
未逐项说明的指标单位、题集修订、服务精度和运行次数保持未知。
工具
工具条件未记录
推理预算
输出上限 64k tokens
框架
未记录
协议
The card says reasoning_effort defaults to max and recommends keeping that default for benchmark reproduction. **NL2Repo**: We evaluated NL2Repo with `temperature=1.0`, `top_p=1.0`, and `max_new_tokens=64k` under 1M context. To prevent hacking, we use rule-based and a LLM-based judgement to prevent malicious behaviors (e.g., unauthorized pip or curl operations).
条件
GLM-5.3; version, score definition, unit, effort, endpoint and precision unspecified. 2026-11-18按完整模型卡修正单位、指标/题集或协议标注,数字不变。

直接支持该成绩

在排名中查看此成绩