SWE Bench Pro
Résultats des évaluations de l’IA et performances des modèles
Type: percentage
Résultats enregistrés
40
Score moyen
58.65%
Plage des scores
46% - 80.30%
Modèle en tête
80.30% - Claude Fable 5
Scores au fil du temps
Scores individuels du benchmark tracés par date.
Résultats des modèles
| Organisation | Modèles | Date du résultat | Meilleur score | Informations | Déclaré par le fournisseur | Source |
|---|---|---|---|---|---|---|
| Claude Fable 5 | 09 juin 2026 | 80,30 % | Higher of Mythos 5 / Fable 5 in Anthropic's launch table | Oui | Source | |
| Claude Mythos 5 | 09 juin 2026 | 80,30 % | Higher of Mythos 5 / Fable 5 in Anthropic's launch table | Oui | Source | |
| Claude Opus 5 | 24 juil. 2026 | 79,20 % | Adaptive thinking at max effort; default sampling settings; average of 5 trials | Oui | Source | |
| Claude Mythos Preview | 07 avr. 2026 | 77,80 % | - | Oui | Source | |
| Fugu Ultra | 22 juin 2026 | 73,70 % | Sakana Fugu product page benchmark table. | Oui | Source | |
| Claude Opus 4.8 | 28 mai 2026 | 69,20 % | Max effort; avg 5 trials | Oui | Source | |
| Claude Opus 4.7 | 16 avr. 2026 | 64,30 % | - | Oui | Source | |
| Claude Sonnet 5 | 30 juin 2026 | 63,20 % | SWE-bench Pro; standard configuration; average over five trials | Oui | Source | |
| Qwen 3.8 27B | 14 août 2026 | 61,70 % | - | Oui | Source | |
| Muse Spark 1.1 | 09 juil. 2026 | 61,50 % | Diverse software engineering | Oui | Source | |
| Qwen 3.7 Max | 21 mai 2026 | 60,60 % | SWE-Pro; refined benchmark; internal agent scaffold | Oui | Source | |
| Laguna S 2.1 | 21 juil. 2026 | 59,40 % | public dataset mean pass@1 | Oui | Source | |
| MiniMax M3 | 01 juin 2026 | 59 % | - | Oui | Source | |
| Fugu | 22 juin 2026 | 59 % | Sakana Fugu product page benchmark table. | Oui | Source | |
| GPT 5.5 | 23 avr. 2026 | 58,60 % | Public | Oui | Source | |
| GLM 5.1 | 07 avr. 2026 | 58,40 % | - | Oui | Source | |
| GPT 5 Pro | 07 août 2025 | 57,70 % | inferred family alias from gpt-5.4 (score=0.4083; benches=19) | Oui | Source | |
| GPT 5 Search API | 14 oct. 2025 | 57,70 % | inferred family alias from gpt-5.4 (score=0.3050; benches=19) | Oui | Source | |
| GPT 5.4 | 05 mars 2026 | 57,70 % | Public | Oui | Source | |
| GPT 5.3 Codex | 05 févr. 2026 | 56,80 % | Public; xhigh reasoning | Oui | Source | |
| Qwen 3.6 Plus | 01 avr. 2026 | 56,60 % | - | Oui | Source | |
| GPT 5.2 Codex | 18 déc. 2025 | 56,40 % | - | Oui | Source | |
| MiniMax M2.7 | 18 mars 2026 | 56,20 % | - | Oui | Source | |
| MiMo V2.5 | 23 avr. 2026 | 56,10 % | Hugging Face evaluation result | Oui | Source | |
| GPT 5.2 | 11 déc. 2025 | 55,60 % | - | Oui | Source |
