MMLU
Ergebnisse von KI-Benchmarks und Modellleistung
Typ: percentage
Erfasste Ergebnisse
140
Durchschnittspunktzahl
78.55%
Punktzahlbereich
41.90% - 90.80%
Führendes Modell
90.80% - GPT 4.5 Preview
Punktzahlen im Zeitverlauf
Einzelne Benchmark-Punktzahlen nach Datum.
Modellergebnisse
| Organisation | Modelle | Gemeldet am | Höchste Punktzahl | Info | Selbst gemeldet | Quelle |
|---|---|---|---|---|---|---|
| GPT 4.5 Preview | 27. Feb. 2025 | 90,80 % | - | Ja | Quelle | |
| o1 preview | 12. Sept. 2024 | 90,80 % | - | Ja | Quelle | |
| Qwen 3 VL 235B A22B Thinking | - | 90,60 % | - | Ja | - | |
| GPT OSS 120b | 05. Aug. 2025 | 90 % | High Reasoning Effort | Ja | Quelle | |
| GPT OSS Safeguard 120b | 29. Okt. 2025 | 90 % | inferred high-confidence family alias from gpt-oss-120b (score=0.5102; benches=7) | Ja | Quelle | |
| LongCat Flash Chat | - | 89,71 % | inferred high-confidence family alias from longcat-flash-chat (score=0.4667; benches=16) | Ja | Quelle | |
| Kimi K2 (2025-09-05) | 05. Sept. 2025 | 89,50 % | EM | Ja | Quelle | |
| Gemini 2.5 Pro Preview (2025-06-05) | 05. Juni 2025 | 89,20 % | - | Ja | Quelle | |
| Qwen 3 VL 235B A22B Instruct | - | 88,80 % | - | Ja | - | |
| GPT 4o (2024-05-13) | 13. Mai 2024 | 88,70 % | - | Ja | Quelle | |
| Qwen 3 VL 32B Thinking | - | 88,70 % | - | Ja | - | |
| Gemini 2.5 Pro Preview (2025-05-06) | 06. Mai 2025 | 88,60 % | Lite | Ja | Quelle | |
| DeepSeek OCR | 20. Okt. 2025 | 88,50 % | inferred family alias from deepseek-v3 (score=0.3000; benches=20) | Ja | Quelle | |
| DeepSeek V2 (2024-06-28) | 28. Juni 2024 | 88,50 % | inferred family alias from deepseek-v3 (score=0.4159; benches=20) | Ja | Quelle | |
| DeepSeek V4 | - | 88,50 % | inferred high-confidence family alias from deepseek-v3 (score=0.5818; benches=20) | Ja | Quelle | |
| Gemini 2.0 Flash | 05. Feb. 2025 | 88,40 % | Lite | Ja | Quelle | |
| Gemini 2.5 Flash Preview (2025-04-17) | 17. Apr. 2025 | 88,40 % | Lite | Ja | Quelle | |
| Gemini 2.5 Flash Preview (2025-05-20) | 20. Mai 2025 | 88,40 % | Lite | Ja | Quelle | |
| Qwen 3 235B A22B | - | 87,81 % | - | Ja | Quelle | |
| Kimi K2 (2025-07-11) | 11. Juli 2025 | 87,80 % | EM | Ja | Quelle | |
| Qwen 3 VL 30B A3B Thinking | - | 87,60 % | - | Ja | - | |
| Grok 2 | 13. Aug. 2024 | 87,50 % | - | Ja | Quelle | |
| Kimi K1.5 | 20. Jan. 2025 | 87,40 % | - | Ja | Quelle | |
| o3 mini | 30. Jan. 2025 | 86,90 % | - | Ja | Quelle | |
| GPT 4 Turbo Preview (1106) | 06. Nov. 2023 | 86,50 % | inferred version-family alias from gpt-4-turbo-2024-04-09 | Ja | Quelle |
