HellaSwag
Ergebnisse von KI-Benchmarks und Modellleistung
Typ: percentageReasoning
Erfasste Ergebnisse
26
Durchschnittspunktzahl
73.26%
Punktzahlbereich
33% - 98.10%
Führendes Modell
98.10% - Drex Max 1.1
Punktzahlen im Zeitverlauf
Einzelne Benchmark-Punktzahlen nach Datum.
Modellergebnisse
| Organisation | Modelle | Gemeldet am | Höchste Punktzahl | Info | Selbst gemeldet | Quelle |
|---|---|---|---|---|---|---|
| Drex Max 1.1 | 28. Okt. 2026 | 98,10 % | Nace launch chart "Decision Models Benchmark" (2026-10-28) | Ja | Quelle | |
| GPT 4 32K 0613 | 13. Juni 2023 | 95,30 % | inferred high-confidence family alias from gpt-4-0613 (score=0.4899; benches=12) | Ja | Quelle | |
| Gemini 1.5 Pro 001 | 23. Mai 2024 | 93,30 % | inferred alias from gemini-1.5-pro | Ja | Quelle | |
| Gemini 1.5 Pro Exp (2024-08-01) | 01. Aug. 2024 | 93,30 % | inferred alias from gemini-1.5-pro | Ja | Quelle | |
| Gemini 1.5 Pro Exp (2024-08-27) | 27. Aug. 2024 | 93,30 % | inferred alias from gemini-1.5-pro | Ja | Quelle | |
| Gemini Robotics ER 1.5 Preview | 25. Sept. 2025 | 93,30 % | inferred family alias from gemini-1.5-pro (score=0.3717; benches=23) | Ja | Quelle | |
| LearnLM 1.5 Pro Experimental | 19. Nov. 2024 | 93,30 % | inferred family alias from gemini-1.5-pro (score=0.3700; benches=23) | Ja | Quelle | |
| Qwen 2 Math 72B | - | 87,60 % | inferred high-confidence family alias from qwen2-72b-instruct (score=0.4667; benches=17) | Ja | Quelle | |
| Qwen 2 Math RM 72B | - | 87,60 % | inferred family alias from qwen2-72b-instruct (score=0.3917; benches=17) | Ja | Quelle | |
| DeepSeek V4.1 Flash | 10. Sept. 2026 | 87,20 % | Base model; 0-shot; EM | Ja | Quelle | |
| Gemini 1.5 Flash 001 | 23. Mai 2024 | 86,50 % | inferred alias from gemini-1.5-flash | Ja | Quelle | |
| Gemini 1.5 Flash Preview | 14. Mai 2024 | 86,50 % | inferred alias from gemini-1.5-flash | Ja | Quelle | |
| Llama 3.1 Nemotron 70B Instruct | 01. Okt. 2024 | 85,58 % | - | Ja | Quelle | |
| Phi 3.5 MoE instruct | 23. Aug. 2024 | 83,80 % | - | Ja | Quelle | |
| Mistral Nemo 12B | 18. Juli 2024 | 83,50 % | inferred family alias from mistral-nemo-instruct-2407 (score=0.3250; benches=8) | Ja | Quelle | |
| Gemma 3n E4B | 25. Juni 2025 | 78,60 % | - | Ja | Quelle | |
| Gemma 3n E2B (Free) | 25. Juni 2025 | 72,20 % | - | Ja | Quelle | |
| Phi 3 Mini 128K Instruct | - | 69,40 % | inferred family alias from phi-3.5-mini-instruct (score=0.3533; benches=31) | Ja | Quelle | |
| Phi 3.5 mini instruct | 23. Aug. 2024 | 69,40 % | - | Ja | Quelle | |
| Phi 4 Mini | 01. Feb. 2025 | 69,10 % | - | Ja | Quelle | |
| Ernie 4.5 21B A3B | - | 33 % | inferred version-family alias from ernie-4.5 | Ja | Quelle | |
| Ernie 4.5 21B A3B Thinking | - | 33 % | inferred version-family alias from ernie-4.5 | Ja | Quelle | |
| Ernie 4.5 300B A47B | - | 33 % | inferred version-family alias from ernie-4.5 | Ja | Quelle | |
| Ernie 4.5 Turbo | - | 33 % | inferred version-family alias from ernie-4.5 | Ja | Quelle | |
| Ernie 4.5 VL 28B A3B | - | 33 % | inferred version-family alias from ernie-4.5 | Ja | Quelle |
