Terminal Bench 2.1
AI बेंचमार्क के परिणाम और मॉडल का प्रदर्शन
प्रकार: percentageCode
दर्ज परिणाम
17
औसत स्कोर
75.10%
स्कोर सीमा
24.58% - 90.60%
अग्रणी मॉडल
90.60% - DeepSeek V4.1 Flash
समय के साथ स्कोर
तारीख के अनुसार दिखाए गए अलग-अलग बेंचमार्क स्कोर।
मॉडल परिणाम
| संगठन | मॉडल | रिपोर्ट किया गया | सबसे ऊँचा स्कोर | जानकारी | स्व-रिपोर्ट किया गया | स्रोत |
|---|---|---|---|---|---|---|
| DeepSeek V4.1 Flash | 10 सित॰ 2026 | 90.60% | Instruct model; reasoning_effort=100; DeepSeek Harness Minimal; 1M context; Pass@1 | हाँ | स्रोत | |
| Kimi K3 | 16 जुल॰ 2026 | 88.30% | KimiCode harness; other models in Moonshot's comparison use their best reported score across different harnesses. | हाँ | स्रोत | |
| Claude Fable 5 | 09 जून 2026 | 88% | Starred row in Anthropic's launch table | हाँ | स्रोत | |
| Claude Mythos 5 | 09 जून 2026 | 88% | Starred row in Anthropic's launch table | हाँ | स्रोत | |
| DeepSeek V4 Flash 0731 | 31 जुल॰ 2026 | 82.70% | DeepSeek Harness minimal mode; max effort; top_p=0.95; temperature=1.0 | हाँ | स्रोत | |
| Fugu Ultra | 22 जून 2026 | 82.10% | Sakana Fugu product page benchmark table. | हाँ | स्रोत | |
| Claude Sonnet 5 | 30 जून 2026 | 80.40% | mini-SWE-agent harness; xhigh effort; mean reward across 445 trials | हाँ | स्रोत | |
| Fugu | 22 जून 2026 | 80.20% | Sakana Fugu product page benchmark table. | हाँ | स्रोत | |
| Beam | 05 अक्टू॰ 2026 | 80.10% | Reflection-reported launch score. Source row: Terminal Bench v2.1. Accessed 2026-10-05T22:51:12.456Z. Harness, reasoning effort, sampling and trial count are not specified per row. Not independently reproduced. | हाँ | स्रोत | |
| Muse Spark 1.1 | 09 जुल॰ 2026 | 80% | Agentic terminal coding | हाँ | स्रोत | |
| Gemini 3.5 Flash | 19 मई 2026 | 76.20% | - | हाँ | स्रोत | |
| Claude Opus 4.8 | 28 मई 2026 | 74.60% | Terminus-2 public harness; max effort | हाँ | स्रोत | |
| Qwen 3.8 27B | 14 अग॰ 2026 | 73% | Terminus harness | हाँ | स्रोत | |
| Laguna S 2.1 | 21 जुल॰ 2026 | 70.20% | mean pass@1 with thinking enabled | हाँ | स्रोत | |
| MiniMax M3 | 01 जून 2026 | 66% | - | हाँ | स्रोत | |
| Muse Glimmer 30B | 10 अग॰ 2026 | 51.70% | With terminus2; high reasoning | हाँ | स्रोत | |
| Nemotron 3.5 Lightning 30B A3B | 11 अग॰ 2026 | 24.58% | NVIDIA release evaluation suite | हाँ | स्रोत |