搜索Ctrl K
  • 榜单数据10-27 10:31
  • 论文数据10-26 14:24
  • 周报10-26 15:29
收录成绩1717 个模型或系统
当前第一64.5Fable 5(high)
指标解决率通过容器测试并解决任务的实例比例(%)
数据时效人工整理整理于 2026-10-26 · 2 个数据源

排名表

显示 17 / 17
模型机构来源备注
1Fable 5(high)Anthropic64.578.4官方榜单2026-10-26定位:官方榜单默认时间窗 2026-05-15 至 2026-07-01,Resolved Rate 排名第 1,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;官方统一评测;Resolved Rate 点估计 64.5%(页面 ±1.41%);官网标记可能数据污染(模型发布晚于时间窗开始)。
2Grok 4.5(high)xAI63.877.5官方榜单2026-10-26定位:同一 time window,排名第 2,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;点估计 63.8%(±0.60%)。
3Opus 5(high)Anthropic63.474.8官方榜单2026-10-26定位:同一 time window,排名第 3,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;点估计 63.4%(±1.35%)。
4GLM-5.2(high)Z.ai62.981.1官方榜单2026-10-26定位:同一 time window,排名第 4,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;点估计 62.9%(±1.19%);榜单 2026-07-01 更新入库。
5GPT-5.6 Sol(medium)OpenAI62.379.3官方榜单2026-10-26定位:同一 time window,排名第 5,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;medium 档;点估计 62.3%(±1.83%)。
6Junie AgentJetBrains61.873.9官方榜单2026-10-26定位:同一 time window,排名第 6,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;官方 reference agent 评测(Insights 标注);2026-04-19 重跑;点估计 61.8%(±0.54%)。
7Claude Code AgentAnthropic60.475.7官方榜单2026-10-26定位:同一 time window,排名第 7,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;官方 reference agent 评测;点估计 60.4%(±1.03%);Agent 结果日期 2025-12-17。
8Codex AgentOpenAI58.073.0官方榜单2026-10-26定位:同一 time window,排名第 8,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;官方 agent 条目;点估计 58.0%(±1.29%);Agent 结果日期 2026-02-13。
9Sonnet 5(high)Anthropic56.874.8官方榜单2026-10-26定位:同一 time window,排名第 9,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;点估计 56.8%(±0.94%)。
10Cursor AgentCursor51.765.8官方榜单2026-10-26定位:同一 time window,排名第 10,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;官方 agent 条目;点估计 51.7%(±0.84%);Agent 结果日期 2026-04-15。
11MiniMax M3MiniMax47.269.4官方榜单2026-10-26定位:同一 time window,排名第 11,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;点估计 47.2%(±1.13%);榜单 2026-06-09 更新入库。
12MiMo V2.5 ProXiaomi46.565.8官方榜单2026-10-26定位:同一 time window,排名第 12,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;点估计 46.5%(±0.54%);榜单 2026-07-01 更新入库。
13GPT-5.6 Luna(medium)OpenAI43.659.5官方榜单2026-10-26定位:同一 time window,排名第 13,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;medium 档;点估计 43.6%(±1.47%)。
14DeepSeek-V4 Pro(high)DeepSeek40.264.0官方榜单2026-10-26定位:同一 time window,排名第 14,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;点估计 40.2%(±1.29%);榜单 2026-07-01 更新入库。
15Qwen3.6-27BAlibaba31.257.7官方榜单2026-10-26定位:同一 time window,排名第 15,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;点估计 31.2%(±1.68%);榜单 2026-07-01 更新入库。
16Qwen3.6-35B-A3BAlibaba24.743.2官方榜单2026-10-26定位:同一 time window,排名第 16,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;点估计 24.7%(±0.79%);榜单 2026-07-01 更新入库。
17Qwen3.5-35B-A3BAlibaba17.136.9官方榜单2026-10-26定位:同一 time window,排名第 17,访问于 2026-10-26;来源发布日期:2026-07-01;111 题;点估计 17.1%(±1.07%);模型 2026-03-20 入库。

榜单说明

第 5 批接入

转录官方默认总榜:时间窗为 PR 创建日 2026-05-15 至 2026-07-01(111 题、65 仓库),整理日 2026-10-26 官网没有更新的时间窗。总分取 Resolved Rate 点估计(页面 ± 为置信区间),Pass@5 为子项。榜单中模型与参考 Agent 产品混排:以「Agent」结尾的行是官方评测的 Agent 产品,其余为模型,括号中是推理强度(官网写作 [high]、[medium])。官网标记为可能数据污染(模型发布晚于时间窗开始)的条目在备注中注明。

指标
  • 解决率:通过容器测试并解决任务的实例比例(%)(越高越好)
  • Pass@5:五次采样中至少一次通过的比例(%)(越高越好)
子项
采样Pass@5
数据源
来源类型
官方榜单 17

分数取自数据源原文;同一模型在不同评测设置或不同来源下分别列出,来源冲突时全部保留并标注来源类型。

更新记录

0 条

首次同步作为基线,之后新上榜、分数变化和移除的条目会记录在这里。