SWE-Bench
AI 基准测试结果和模型表现
类型: percentageCode
已记录的结果
148
平均分数
59.84%
分数范围
8.70% - 96%
领先模型
96% - Claude Opus 5
分数变化趋势
按日期绘制的单项基准测试分数。
模型结果
| 组织 | 模型 | 报告时间 | 最高分数 | 信息 | 自行报告 | 来源 |
|---|---|---|---|---|---|---|
| Claude Opus 5 | 2026年7月24日 | 96% | SWE-bench Verified; adaptive thinking at max effort; default sampling settings; average of 5 trials | 是 | 来源 | |
| Claude Mythos Preview | 2026年4月07日 | 93.90% | Verified | 是 | 来源 | |
| Claude Opus 4.8 | 2026年5月28日 | 88.60% | SWE-bench Verified; max effort; avg 5 trials | 是 | 来源 | |
| Claude Opus 4.7 | 2026年4月16日 | 87.60% | Verified | 是 | 来源 | |
| Claude Sonnet 5 | 2026年6月30日 | 85.20% | SWE-bench Verified; standard configuration; average over five trials | 是 | 来源 | |
| Claude Opus 4.5 | 2025年11月24日 | 80.90% | Avg@5, 64k Thinking | 是 | 来源 | |
| Beam | 2026年10月05日 | 80.90% | Reflection-reported launch score. Source row: SWEBench Verified. Accessed 2026-10-05T22:51:12.456Z. Harness, reasoning effort, sampling and trial count are not specified per row. Not independently reproduced. | 是 | 来源 | |
| Claude Opus 4.6 | 2026年2月05日 | 80.80% | Verified | 是 | 来源 | |
| DeepSeek V4 Pro | 2026年4月24日 | 80.60% | SWE Verified; resolved; DeepSeek-V4-Pro Max | 是 | 来源 | |
| Gemini 3.1 Pro Preview | 2026年2月19日 | 80.60% | Single Attempt | 是 | - | |
| Qwen 3.7 Max | 2026年5月21日 | 80.40% | SWE-Verified; internal agent scaffold | 是 | 来源 | |
| MiniMax M2.5 | 2026年2月12日 | 80.20% | - | 是 | 来源 | |
| GPT 5.2 | 2025年12月11日 | 80% | - | 是 | 来源 | |
| GPT 5.2 Chat | 2025年12月11日 | 80% | inferred alias from gpt-5.2-2025-12-11 | 是 | 来源 | |
| Claude Sonnet 4.6 | 2026年2月17日 | 79.60% | Verified | 是 | 来源 | |
| DeepSeek V4 Flash | 2026年4月24日 | 79% | SWE Verified; resolved; DeepSeek-V4-Flash Max | 是 | 来源 | |
| Qwen 3.6 Plus | 2026年4月01日 | 78.80% | - | 是 | 来源 | |
| Gemini 3 Flash Preview | 2025年12月17日 | 78% | - | 是 | 来源 | |
| MiMo V2 Pro | 2026年3月18日 | 78% | - | 是 | 来源 | |
| MiMo V2 TTS (Free) | 2026年3月18日 | 78% | inferred modality/version alias from mimo-v2-pro | 是 | 来源 | |
| GLM 5 | 2026年2月11日 | 77.80% | - | 是 | 来源 | |
| Mistral Medium 3.5 | 2026年4月29日 | 77.60% | Verified | 是 | 来源 | |
| Muse Spark | 2026年4月08日 | 77.40% | Verified | 是 | 来源 | |
| Kimi K2.5 | 2026年1月27日 | 76.80% | - | 是 | 来源 | |
| Seed 2.0 Pro | 2026年2月14日 | 76.50% | - | 是 | 来源 |
