搜索Ctrl K
  • 榜单数据10-27 10:31
  • 论文数据10-26 14:24
  • 周报10-26 15:29

部分条目由管线从新发表的论文中发现,经独立的 AI 核查后自动并入(备注中注明),未经人工逐条审核;分数以原文为准。

收录成绩2020 个模型或系统
当前第一82.2Muse Spark
指标Pass@0.75 (%)原子 claim 覆盖率不低于 0.75 的任务通过率(0–100,百分比)
数据时效人工整理整理于 2026-10-26 · 1 个数据源

排名表

显示 20 / 20
分项覆盖率阈值
模型来源备注
1Muse Spark82.286.289.671.2第三方复现2026-10-26定位:Table 8,Muse Spark 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
2Claude Opus 4.779.183.889.563.2第三方复现2026-10-26定位:Table 8,Claude Opus 4.7 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
3Gemini 3.1 Pro Preview78.283.990.661.8第三方复现2026-10-26定位:Table 8,Gemini 3.1 Pro Preview 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
4Claude Opus 4.676.882.788.661.1第三方复现2026-10-26定位:Table 8,Claude Opus 4.6 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
5GLM-5.175.681.888.559.0第三方复现2026-10-26定位:Table 8,GLM-5.1 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
6GPT-5.575.382.190.256.4第三方复现2026-10-26定位:Table 8,GPT-5.5 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
7GPT-5.470.678.587.248.9第三方复现2026-10-26定位:Table 8,GPT-5.4 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
8Gemini 3 Pro Preview70.379.085.952.7第三方复现2026-10-26定位:Table 8,Gemini 3 Pro Preview 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
9Claude Opus 4.569.876.982.453.9第三方复现2026-10-26定位:Table 8,Claude Opus 4.5 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
10Claude Sonnet 4.669.578.084.155.0第三方复现2026-10-26定位:Table 8,Claude Sonnet 4.6 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
11GPT-5.267.675.581.450.6第三方复现2026-10-26定位:Table 8,GPT-5.2 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
12Kimi K2.564.472.578.647.9第三方复现2026-10-26定位:Table 8,Kimi K2.5 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
13Gemini 3 Flash Preview62.072.078.247.5第三方复现2026-10-26定位:Table 8,Gemini 3 Flash Preview 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
14Claude Sonnet 4.559.569.775.745.0第三方复现2026-10-26定位:Table 8,Claude Sonnet 4.5 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
15GLM-4.758.168.574.143.7第三方复现2026-10-26定位:Table 8,GLM-4.7 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
16Gemini 3.1 Flash Lite Preview57.168.675.140.2第三方复现2026-10-26定位:Table 8,Gemini 3.1 Flash Lite Preview 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
17GPT-5.4 Mini56.768.276.836.4第三方复现2026-10-26定位:Table 8,GPT-5.4 Mini 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
18GPT-5.150.161.566.635.3第三方复现2026-10-26定位:Table 8,GPT-5.1 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
19o3 Pro44.554.258.431.6第三方复现2026-10-26定位:Table 8,o3 Pro 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制
20Claude Haiku 4.540.251.755.827.1第三方复现2026-10-26定位:Table 8,Claude Haiku 4.5 行;来源发布日期:2026-02-03;经 AI 核查自动并入(2026-10-26);表中为 0–1 小数,已换算为百分制

榜单说明

第 5 批接入

本榜单由管线根据论文 arXiv:2602.00933 的 Table 8 自动整理,经独立的 AI 核查后上线(开发计划 D20),未经人工逐条审核;条目为论文作者统一评测的结果,分数以原文为准。

指标
  • Pass@0.75 (%):原子 claim 覆盖率不低于 0.75 的任务通过率(0–100,百分比)(越高越好)
子项
分项Mean Coverage覆盖率阈值Pass@0.50 (%)Pass@0.90 (%)
数据源
来源类型
第三方复现 20

分数取自数据源原文;同一模型在不同评测设置或不同来源下分别列出,来源冲突时全部保留并标注来源类型。

更新记录

0 条

首次同步作为基线,之后新上榜、分数变化和移除的条目会记录在这里。