SWE-Lancer
AI बेंचमार्क के परिणाम और मॉडल का प्रदर्शन
प्रकार: percentageCode
दर्ज परिणाम
31
औसत स्कोर
33.75%
स्कोर सीमा
7.40% - 81.40%
अग्रणी मॉडल
81.40% - GPT 5.3 Codex
समय के साथ स्कोर
तारीख के अनुसार दिखाए गए अलग-अलग बेंचमार्क स्कोर।
मॉडल परिणाम
| संगठन | मॉडल | रिपोर्ट किया गया | सबसे ऊँचा स्कोर | जानकारी | स्व-रिपोर्ट किया गया | स्रोत |
|---|---|---|---|---|---|---|
| GPT 5.3 Codex | 05 फ़र॰ 2026 | 81.40% | SWE-Lancer IC Diamond; xhigh reasoning | हाँ | स्रोत | |
| GPT 5.2 | 11 दिस॰ 2025 | 74.60% | IC Diamond | हाँ | स्रोत | |
| GPT 5.2 Chat | 11 दिस॰ 2025 | 74.60% | inferred alias from gpt-5.2-2025-12-11 | हाँ | स्रोत | |
| GPT 5.1 Codex | 13 नव॰ 2025 | 66.30% | - | हाँ | स्रोत | |
| GPT Audio 1.5 | 23 फ़र॰ 2026 | 66.30% | manual fallback alias from gpt-5.1-codex | हाँ | स्रोत | |
| GPT Realtime 1.5 | 23 फ़र॰ 2026 | 66.30% | manual fallback alias from gpt-5.1-codex | हाँ | स्रोत | |
| Seed 2.0 Pro | 14 फ़र॰ 2026 | 49.40% | Seed2 official benchmark table | SWE-Lancer | हाँ | स्रोत | |
| Seed 2.0 Lite | 14 फ़र॰ 2026 | 47.10% | Seed2 official benchmark table | SWE-Lancer | हाँ | स्रोत | |
| GPT 4.5 Preview | 27 फ़र॰ 2025 | 37.30% | - | हाँ | स्रोत | |
| GPT 4.1 | 14 अप्रैल 2025 | 35.10% | IC-Diamond | हाँ | स्रोत | |
| GPT 4o (2024-08-06) | 06 अग॰ 2024 | 32.60% | - | हाँ | स्रोत | |
| GPT 4o Audio Preview (2025-06-03) | 03 जून 2025 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | हाँ | स्रोत | |
| GPT 4o Audio Preview (2024-10-01) | 01 अक्टू॰ 2024 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | हाँ | स्रोत | |
| GPT 4o Audio Preview (2024-12-17) | 17 दिस॰ 2024 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | हाँ | स्रोत | |
| GPT 4o Realtime Preview (2025-06-03) | 03 जून 2025 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | हाँ | स्रोत | |
| GPT 4o Realtime Preview (2024-10-01) | 01 अक्टू॰ 2024 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | हाँ | स्रोत | |
| GPT 4o Search Preview | 11 मार्च 2025 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | हाँ | स्रोत | |
| GPT 4o Transcribe | 20 मार्च 2025 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | हाँ | स्रोत | |
| GPT 4o Transcribe Diarize | 15 अक्टू॰ 2025 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | हाँ | स्रोत | |
| o3 mini | 30 जन॰ 2025 | 18% | - | हाँ | स्रोत |