GLM-5.3 · NL2Repo · GLM-5.3模型卡;unknown · 成绩与配置

GLM-5.3 的 NL2Repo · GLM-5.3模型卡;unknown 记录。本次发布有 1 条成绩记录,含 1 条精确值(可含历史记录),附 2 条来源定位。

成绩与评测条件

GLM-5.3 · NL2Repo 成绩与配置
指标与成绩配置与评测条件出处
Reported score58原文 58.0 · 单位 未标注
公布 未确认
GLM-5.3 · max
设置
官方模型卡目标列;逐行scaffold、工具、采样及预算条件见protocol。来源把benchmark复现明确绑定max或行内明确reasoning_effort=max。
未知项
未逐项说明的指标单位、题集修订、服务精度和运行次数保持未知。
工具
工具条件未记录
推理预算
输出上限 64k tokens
框架
未记录
协议
The card says reasoning_effort defaults to max and recommends keeping that default for benchmark reproduction. **NL2Repo**: We evaluated NL2Repo with `temperature=1.0`, `top_p=1.0`, and `max_new_tokens=64k` under 1M context. To prevent hacking, we use rule-based and a LLM-based judgement to prevent malicious behaviors (e.g., unauthorized pip or curl operations).
条件
GLM-5.3; version, score definition, unit, effort, endpoint and precision unspecified. 2026-11-18按完整模型卡修正单位、指标/题集或协议标注,数字不变。
在排名中查看此成绩

出处与披露

测试版本与指标

别名 NL2Repo

  • Reported score · 单位未标注 · 排序方向未确认