SWE Bench Pro
Resultados de benchmarks de IA e desempenho dos modelos
Tipo: percentage
Resultados registrados
40
Pontuação média
58.65%
Faixa de pontuação
46% - 80.30%
Modelo líder
80.30% - Claude Fable 5
Pontuações ao longo do tempo
Pontuações individuais do benchmark exibidas por data.
Resultados de modelos
| Organização | Modelos | Data informada | Maior pontuação | Informações | Declarado pelo provedor | Fonte |
|---|---|---|---|---|---|---|
| Claude Fable 5 | 09 de jun. de 2026 | 80,30% | Higher of Mythos 5 / Fable 5 in Anthropic's launch table | Sim | Fonte | |
| Claude Mythos 5 | 09 de jun. de 2026 | 80,30% | Higher of Mythos 5 / Fable 5 in Anthropic's launch table | Sim | Fonte | |
| Claude Opus 5 | 24 de jul. de 2026 | 79,20% | Adaptive thinking at max effort; default sampling settings; average of 5 trials | Sim | Fonte | |
| Claude Mythos Preview | 07 de abr. de 2026 | 77,80% | - | Sim | Fonte | |
| Fugu Ultra | 22 de jun. de 2026 | 73,70% | Sakana Fugu product page benchmark table. | Sim | Fonte | |
| Claude Opus 4.8 | 28 de mai. de 2026 | 69,20% | Max effort; avg 5 trials | Sim | Fonte | |
| Claude Opus 4.7 | 16 de abr. de 2026 | 64,30% | - | Sim | Fonte | |
| Claude Sonnet 5 | 30 de jun. de 2026 | 63,20% | SWE-bench Pro; standard configuration; average over five trials | Sim | Fonte | |
| Qwen 3.8 27B | 14 de ago. de 2026 | 61,70% | - | Sim | Fonte | |
| Muse Spark 1.1 | 09 de jul. de 2026 | 61,50% | Diverse software engineering | Sim | Fonte | |
| Qwen 3.7 Max | 21 de mai. de 2026 | 60,60% | SWE-Pro; refined benchmark; internal agent scaffold | Sim | Fonte | |
| Laguna S 2.1 | 21 de jul. de 2026 | 59,40% | public dataset mean pass@1 | Sim | Fonte | |
| MiniMax M3 | 01 de jun. de 2026 | 59% | - | Sim | Fonte | |
| Fugu | 22 de jun. de 2026 | 59% | Sakana Fugu product page benchmark table. | Sim | Fonte | |
| GPT 5.5 | 23 de abr. de 2026 | 58,60% | Public | Sim | Fonte | |
| GLM 5.1 | 07 de abr. de 2026 | 58,40% | - | Sim | Fonte | |
| GPT 5 Pro | 07 de ago. de 2025 | 57,70% | inferred family alias from gpt-5.4 (score=0.4083; benches=19) | Sim | Fonte | |
| GPT 5 Search API | 14 de out. de 2025 | 57,70% | inferred family alias from gpt-5.4 (score=0.3050; benches=19) | Sim | Fonte | |
| GPT 5.4 | 05 de mar. de 2026 | 57,70% | Public | Sim | Fonte | |
| GPT 5.3 Codex | 05 de fev. de 2026 | 56,80% | Public; xhigh reasoning | Sim | Fonte | |
| Qwen 3.6 Plus | 01 de abr. de 2026 | 56,60% | - | Sim | Fonte | |
| GPT 5.2 Codex | 18 de dez. de 2025 | 56,40% | - | Sim | Fonte | |
| MiniMax M2.7 | 18 de mar. de 2026 | 56,20% | - | Sim | Fonte | |
| MiMo V2.5 | 23 de abr. de 2026 | 56,10% | Hugging Face evaluation result | Sim | Fonte | |
| GPT 5.2 | 11 de dez. de 2025 | 55,60% | - | Sim | Fonte |
