SWE-Bench
Ergebnisse von KI-Benchmarks und Modellleistung
Typ: percentageCode
Erfasste Ergebnisse
148
Durchschnittspunktzahl
59.84%
Punktzahlbereich
8.70% - 96%
Führendes Modell
96% - Claude Opus 5
Punktzahlen im Zeitverlauf
Einzelne Benchmark-Punktzahlen nach Datum.
Modellergebnisse
| Organisation | Modelle | Gemeldet am | Höchste Punktzahl | Info | Selbst gemeldet | Quelle |
|---|---|---|---|---|---|---|
| Claude Opus 5 | 24. Juli 2026 | 96 % | SWE-bench Verified; adaptive thinking at max effort; default sampling settings; average of 5 trials | Ja | Quelle | |
| Claude Mythos Preview | 07. Apr. 2026 | 93,90 % | Verified | Ja | Quelle | |
| Claude Opus 4.8 | 28. Mai 2026 | 88,60 % | SWE-bench Verified; max effort; avg 5 trials | Ja | Quelle | |
| Claude Opus 4.7 | 16. Apr. 2026 | 87,60 % | Verified | Ja | Quelle | |
| Claude Sonnet 5 | 30. Juni 2026 | 85,20 % | SWE-bench Verified; standard configuration; average over five trials | Ja | Quelle | |
| Claude Opus 4.5 | 24. Nov. 2025 | 80,90 % | Avg@5, 64k Thinking | Ja | Quelle | |
| Beam | 05. Okt. 2026 | 80,90 % | Reflection-reported launch score. Source row: SWEBench Verified. Accessed 2026-10-05T22:51:12.456Z. Harness, reasoning effort, sampling and trial count are not specified per row. Not independently reproduced. | Ja | Quelle | |
| Claude Opus 4.6 | 05. Feb. 2026 | 80,80 % | Verified | Ja | Quelle | |
| DeepSeek V4 Pro | 24. Apr. 2026 | 80,60 % | SWE Verified; resolved; DeepSeek-V4-Pro Max | Ja | Quelle | |
| Gemini 3.1 Pro Preview | 19. Feb. 2026 | 80,60 % | Single Attempt | Ja | - | |
| Qwen 3.7 Max | 21. Mai 2026 | 80,40 % | SWE-Verified; internal agent scaffold | Ja | Quelle | |
| MiniMax M2.5 | 12. Feb. 2026 | 80,20 % | - | Ja | Quelle | |
| GPT 5.2 | 11. Dez. 2025 | 80 % | - | Ja | Quelle | |
| GPT 5.2 Chat | 11. Dez. 2025 | 80 % | inferred alias from gpt-5.2-2025-12-11 | Ja | Quelle | |
| Claude Sonnet 4.6 | 17. Feb. 2026 | 79,60 % | Verified | Ja | Quelle | |
| DeepSeek V4 Flash | 24. Apr. 2026 | 79 % | SWE Verified; resolved; DeepSeek-V4-Flash Max | Ja | Quelle | |
| Qwen 3.6 Plus | 01. Apr. 2026 | 78,80 % | - | Ja | Quelle | |
| Gemini 3 Flash Preview | 17. Dez. 2025 | 78 % | - | Ja | Quelle | |
| MiMo V2 Pro | 18. März 2026 | 78 % | - | Ja | Quelle | |
| MiMo V2 TTS (Free) | 18. März 2026 | 78 % | inferred modality/version alias from mimo-v2-pro | Ja | Quelle | |
| GLM 5 | 11. Feb. 2026 | 77,80 % | - | Ja | Quelle | |
| Mistral Medium 3.5 | 29. Apr. 2026 | 77,60 % | Verified | Ja | Quelle | |
| Muse Spark | 08. Apr. 2026 | 77,40 % | Verified | Ja | Quelle | |
| Kimi K2.5 | 27. Jan. 2026 | 76,80 % | - | Ja | Quelle | |
| Seed 2.0 Pro | 14. Feb. 2026 | 76,50 % | - | Ja | Quelle |