SWE-Lancer
AIベンチマーク結果とモデルの性能
種類: percentageCode
記録された結果
31
平均スコア
33.75%
スコアの範囲
7.40% - 81.40%
最上位モデル
81.40% - GPT 5.3 Codex
スコアの推移
日付ごとの個別ベンチマークスコアです。
モデル結果
| 組織 | モデル | 報告日 | 最高スコア | 情報 | 自己申告 | 出典 |
|---|---|---|---|---|---|---|
| GPT 5.3 Codex | 2026年2月05日 | 81.40% | SWE-Lancer IC Diamond; xhigh reasoning | はい | 出典 | |
| GPT 5.2 | 2025年12月11日 | 74.60% | IC Diamond | はい | 出典 | |
| GPT 5.2 Chat | 2025年12月11日 | 74.60% | inferred alias from gpt-5.2-2025-12-11 | はい | 出典 | |
| GPT 5.1 Codex | 2025年11月13日 | 66.30% | - | はい | 出典 | |
| GPT Audio 1.5 | 2026年2月23日 | 66.30% | manual fallback alias from gpt-5.1-codex | はい | 出典 | |
| GPT Realtime 1.5 | 2026年2月23日 | 66.30% | manual fallback alias from gpt-5.1-codex | はい | 出典 | |
| Seed 2.0 Pro | 2026年2月14日 | 49.40% | Seed2 official benchmark table | SWE-Lancer | はい | 出典 | |
| Seed 2.0 Lite | 2026年2月14日 | 47.10% | Seed2 official benchmark table | SWE-Lancer | はい | 出典 | |
| GPT 4.5 Preview | 2025年2月27日 | 37.30% | - | はい | 出典 | |
| GPT 4.1 | 2025年4月14日 | 35.10% | IC-Diamond | はい | 出典 | |
| GPT 4o (2024-08-06) | 2024年8月06日 | 32.60% | - | はい | 出典 | |
| GPT 4o Audio Preview (2025-06-03) | 2025年6月03日 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 | |
| GPT 4o Audio Preview (2024-10-01) | 2024年10月01日 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 | |
| GPT 4o Audio Preview (2024-12-17) | 2024年12月17日 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 | |
| GPT 4o Realtime Preview (2025-06-03) | 2025年6月03日 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 | |
| GPT 4o Realtime Preview (2024-10-01) | 2024年10月01日 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 | |
| GPT 4o Search Preview | 2025年3月11日 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 | |
| GPT 4o Transcribe | 2025年3月20日 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 | |
| GPT 4o Transcribe Diarize | 2025年10月15日 | 32.60% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 | |
| o3 mini | 2025年1月30日 | 18% | - | はい | 出典 |
