SWE-Bench
Resultados de benchmarks de IA e desempenho dos modelos
Tipo: percentageCode
Resultados registrados
148
Pontuação média
59.84%
Faixa de pontuação
8.70% - 96%
Modelo líder
96% - Claude Opus 5
Pontuações ao longo do tempo
Pontuações individuais do benchmark exibidas por data.
Resultados de modelos
| Organização | Modelos | Data informada | Maior pontuação | Informações | Declarado pelo provedor | Fonte |
|---|---|---|---|---|---|---|
| Claude Opus 5 | 24 de jul. de 2026 | 96% | SWE-bench Verified; adaptive thinking at max effort; default sampling settings; average of 5 trials | Sim | Fonte | |
| Claude Mythos Preview | 07 de abr. de 2026 | 93,90% | Verified | Sim | Fonte | |
| Claude Opus 4.8 | 28 de mai. de 2026 | 88,60% | SWE-bench Verified; max effort; avg 5 trials | Sim | Fonte | |
| Claude Opus 4.7 | 16 de abr. de 2026 | 87,60% | Verified | Sim | Fonte | |
| Claude Sonnet 5 | 30 de jun. de 2026 | 85,20% | SWE-bench Verified; standard configuration; average over five trials | Sim | Fonte | |
| Claude Opus 4.5 | 24 de nov. de 2025 | 80,90% | Avg@5, 64k Thinking | Sim | Fonte | |
| Beam | 05 de out. de 2026 | 80,90% | Reflection-reported launch score. Source row: SWEBench Verified. Accessed 2026-10-05T22:51:12.456Z. Harness, reasoning effort, sampling and trial count are not specified per row. Not independently reproduced. | Sim | Fonte | |
| Claude Opus 4.6 | 05 de fev. de 2026 | 80,80% | Verified | Sim | Fonte | |
| DeepSeek V4 Pro | 24 de abr. de 2026 | 80,60% | SWE Verified; resolved; DeepSeek-V4-Pro Max | Sim | Fonte | |
| Gemini 3.1 Pro Preview | 19 de fev. de 2026 | 80,60% | Single Attempt | Sim | - | |
| Qwen 3.7 Max | 21 de mai. de 2026 | 80,40% | SWE-Verified; internal agent scaffold | Sim | Fonte | |
| MiniMax M2.5 | 12 de fev. de 2026 | 80,20% | - | Sim | Fonte | |
| GPT 5.2 | 11 de dez. de 2025 | 80% | - | Sim | Fonte | |
| GPT 5.2 Chat | 11 de dez. de 2025 | 80% | inferred alias from gpt-5.2-2025-12-11 | Sim | Fonte | |
| Claude Sonnet 4.6 | 17 de fev. de 2026 | 79,60% | Verified | Sim | Fonte | |
| DeepSeek V4 Flash | 24 de abr. de 2026 | 79% | SWE Verified; resolved; DeepSeek-V4-Flash Max | Sim | Fonte | |
| Qwen 3.6 Plus | 01 de abr. de 2026 | 78,80% | - | Sim | Fonte | |
| Gemini 3 Flash Preview | 17 de dez. de 2025 | 78% | - | Sim | Fonte | |
| MiMo V2 Pro | 18 de mar. de 2026 | 78% | - | Sim | Fonte | |
| MiMo V2 TTS (Free) | 18 de mar. de 2026 | 78% | inferred modality/version alias from mimo-v2-pro | Sim | Fonte | |
| GLM 5 | 11 de fev. de 2026 | 77,80% | - | Sim | Fonte | |
| Mistral Medium 3.5 | 29 de abr. de 2026 | 77,60% | Verified | Sim | Fonte | |
| Muse Spark | 08 de abr. de 2026 | 77,40% | Verified | Sim | Fonte | |
| Kimi K2.5 | 27 de jan. de 2026 | 76,80% | - | Sim | Fonte | |
| Seed 2.0 Pro | 14 de fev. de 2026 | 76,50% | - | Sim | Fonte |