GSM8K
Résultats des évaluations de l’IA et performances des modèles
Type: percentage
Résultats enregistrés
62
Score moyen
80.12%
Plage des scores
25.20% - 97%
Modèle en tête
97% - GPT 4.5 Preview
Scores au fil du temps
Scores individuels du benchmark tracés par date.
Résultats des modèles
| Organisation | Modèles | Date du résultat | Meilleur score | Informations | Déclaré par le fournisseur | Source |
|---|---|---|---|---|---|---|
| GPT 4.5 Preview | 27 févr. 2025 | 97 % | - | Oui | Source | |
| Qwen 72B | - | 95,80 % | inferred family alias from qwen-2.5-72b-instruct (score=0.3060; benches=14) | Oui | Source | |
| DeepSeek V2.5 (2024-09-05) | 05 sept. 2024 | 95,10 % | inferred alias from deepseek-v2.5 | Oui | Source | |
| DeepSeek V2.5 (2024-12-10) | 10 déc. 2024 | 95,10 % | inferred alias from deepseek-v2.5 | Oui | Source | |
| Qwen 14B | - | 94,80 % | inferred family alias from qwen-2.5-14b-instruct (score=0.3060; benches=16) | Oui | Source | |
| Qwen 3 235B A22B | - | 94,39 % | - | Oui | Source | |
| Granite 4.1 30B | 29 avr. 2026 | 94,16 % | 8-shot | Oui | Source | |
| Mistral Large 2.1 | 18 nov. 2024 | 93 % | inferred version-family alias from mistral-large-2-2407 | Oui | Source | |
| Mistral OCR 2 | 22 mai 2025 | 93 % | inferred family alias from mistral-large-2-2407 (score=0.3100; benches=5) | Oui | Source | |
| DeepSeek V4.1 Flash | 10 sept. 2026 | 93 % | Base model; 8-shot; EM | Oui | Source | |
| DeepSeek V4 Pro | 24 avr. 2026 | 92,60 % | Hugging Face evaluation result | Oui | Source | |
| Granite 4.1 8B | 29 avr. 2026 | 92,49 % | 8-shot | Oui | Source | |
| Kimi K2 (2025-07-11) | 11 juil. 2025 | 92,10 % | EM | Oui | Source | |
| Qwen 7B | - | 91,60 % | inferred family alias from qwen-2.5-7b-instruct (score=0.3083; benches=14) | Oui | Source | |
| Llama 3.1 Nemotron 70B Instruct | 01 oct. 2024 | 91,43 % | - | Oui | Source | |
| Qwen 2 Math 72B | - | 91,10 % | inferred high-confidence family alias from qwen2-72b-instruct (score=0.4667; benches=17) | Oui | Source | |
| Qwen 2 Math RM 72B | - | 91,10 % | inferred family alias from qwen2-72b-instruct (score=0.3917; benches=17) | Oui | Source | |
| Gemini 1.5 Pro 001 | 23 mai 2024 | 90,80 % | inferred alias from gemini-1.5-pro | Oui | Source | |
| Gemini 1.5 Pro Exp (2024-08-01) | 01 août 2024 | 90,80 % | inferred alias from gemini-1.5-pro | Oui | Source | |
| Gemini 1.5 Pro Exp (2024-08-27) | 27 août 2024 | 90,80 % | inferred alias from gemini-1.5-pro | Oui | Source | |
| Gemini Robotics ER 1.5 Preview | 25 sept. 2025 | 90,80 % | inferred family alias from gemini-1.5-pro (score=0.3717; benches=23) | Oui | Source | |
| LearnLM 1.5 Pro Experimental | 19 nov. 2024 | 90,80 % | inferred family alias from gemini-1.5-pro (score=0.3700; benches=23) | Oui | Source | |
| Grok 1.5 | 28 mars 2024 | 90 % | - | Oui | Source | |
| Phi 3.5 MoE instruct | 23 août 2024 | 88,70 % | - | Oui | Source | |
| Qwen 2.5 Coder 3B | - | 88,70 % | inferred family alias from qwen2.5-omni-7b (score=0.3000; benches=45) | Oui | Source |