Evaluation sourcesOfficial evaluation
MirrorCode
Epoch AI / 编程 · 长时间的软件复现
On HOTAIReference only
Evidence budgetUnweighted
Upstream data09/23 00:42
Last successful sync10/01 20:05
What and how it measures
已发布数据仅少量型号,且运行时间很长;样本和运行条件不足以形成分类共识。
How this evidence is used
仅供参考,不进入综合或分类分数。
Evaluation results
按固定规则,每个公开模型采用一套代表配置。匿名测试型号不展示,保留原榜名次,每项最多 30 个。
| Source rank | Source model | Raw score | Representative configuration |
|---|---|---|---|
| 1 | claude-opus-5-5_maxAnthropic | 77.4% | Max 推理 |
| 2 | claude-fable-5-1_highAnthropic | 73.3% | High 推理 |
| 3 | claude-fable-5_highAnthropic | 63.9% | High 推理 |
| 4 | gpt-6-astra_highOpenAI | 46.7% | High 推理 |
| 5 | claude-opus-4-7_highAnthropic | 31.1% | High 推理 |
| 6 | gpt-5.6-sol_highOpenAI | 20.0% | High 推理 |
| 7 | gpt-5.4-2026-03-05_highOpenAI | 15.6% | High 推理 |
| 8 | gpt-5.5_highOpenAI | 10.0% | High 推理 |
| 9 | gemini-3.1-pro-preview_highGoogle | 8.9% | High 推理 |
Evaluation limits and attribution
仅供参考,不进入综合或分类分数。
Data license: CC BY 4.0 · Epoch AI 自行评测数据
成绩由 Epoch AI 发布,原始分数与 HOTAI 共识分使用不同尺度,不能直接相加。