SWE-Bench
AI बेंचमार्क के परिणाम और मॉडल का प्रदर्शन
प्रकार: percentageCode
दर्ज परिणाम
148
औसत स्कोर
59.84%
स्कोर सीमा
8.70% - 96%
अग्रणी मॉडल
96% - Claude Opus 5
समय के साथ स्कोर
तारीख के अनुसार दिखाए गए अलग-अलग बेंचमार्क स्कोर।
मॉडल परिणाम
| संगठन | मॉडल | रिपोर्ट किया गया | सबसे ऊँचा स्कोर | जानकारी | स्व-रिपोर्ट किया गया | स्रोत |
|---|---|---|---|---|---|---|
| Claude Opus 5 | 24 जुल॰ 2026 | 96% | SWE-bench Verified; adaptive thinking at max effort; default sampling settings; average of 5 trials | हाँ | स्रोत | |
| Claude Mythos Preview | 07 अप्रैल 2026 | 93.90% | Verified | हाँ | स्रोत | |
| Claude Opus 4.8 | 28 मई 2026 | 88.60% | SWE-bench Verified; max effort; avg 5 trials | हाँ | स्रोत | |
| Claude Opus 4.7 | 16 अप्रैल 2026 | 87.60% | Verified | हाँ | स्रोत | |
| Claude Sonnet 5 | 30 जून 2026 | 85.20% | SWE-bench Verified; standard configuration; average over five trials | हाँ | स्रोत | |
| Claude Opus 4.5 | 24 नव॰ 2025 | 80.90% | Avg@5, 64k Thinking | हाँ | स्रोत | |
| Beam | 05 अक्टू॰ 2026 | 80.90% | Reflection-reported launch score. Source row: SWEBench Verified. Accessed 2026-10-05T22:51:12.456Z. Harness, reasoning effort, sampling and trial count are not specified per row. Not independently reproduced. | हाँ | स्रोत | |
| Claude Opus 4.6 | 05 फ़र॰ 2026 | 80.80% | Verified | हाँ | स्रोत | |
| DeepSeek V4 Pro | 24 अप्रैल 2026 | 80.60% | SWE Verified; resolved; DeepSeek-V4-Pro Max | हाँ | स्रोत | |
| Gemini 3.1 Pro Preview | 19 फ़र॰ 2026 | 80.60% | Single Attempt | हाँ | - | |
| Qwen 3.7 Max | 21 मई 2026 | 80.40% | SWE-Verified; internal agent scaffold | हाँ | स्रोत | |
| MiniMax M2.5 | 12 फ़र॰ 2026 | 80.20% | - | हाँ | स्रोत | |
| GPT 5.2 | 11 दिस॰ 2025 | 80% | - | हाँ | स्रोत | |
| GPT 5.2 Chat | 11 दिस॰ 2025 | 80% | inferred alias from gpt-5.2-2025-12-11 | हाँ | स्रोत | |
| Claude Sonnet 4.6 | 17 फ़र॰ 2026 | 79.60% | Verified | हाँ | स्रोत | |
| DeepSeek V4 Flash | 24 अप्रैल 2026 | 79% | SWE Verified; resolved; DeepSeek-V4-Flash Max | हाँ | स्रोत | |
| Qwen 3.6 Plus | 01 अप्रैल 2026 | 78.80% | - | हाँ | स्रोत | |
| Gemini 3 Flash Preview | 17 दिस॰ 2025 | 78% | - | हाँ | स्रोत | |
| MiMo V2 Pro | 18 मार्च 2026 | 78% | - | हाँ | स्रोत | |
| MiMo V2 TTS (Free) | 18 मार्च 2026 | 78% | inferred modality/version alias from mimo-v2-pro | हाँ | स्रोत | |
| GLM 5 | 11 फ़र॰ 2026 | 77.80% | - | हाँ | स्रोत | |
| Mistral Medium 3.5 | 29 अप्रैल 2026 | 77.60% | Verified | हाँ | स्रोत | |
| Muse Spark | 08 अप्रैल 2026 | 77.40% | Verified | हाँ | स्रोत | |
| Kimi K2.5 | 27 जन॰ 2026 | 76.80% | - | हाँ | स्रोत | |
| Seed 2.0 Pro | 14 फ़र॰ 2026 | 76.50% | - | हाँ | स्रोत |