MGSM
Resultados de benchmarks de IA e desempenho dos modelos
Tipo: percentageMath
Resultados registrados
40
Pontuação média
79.07%
Faixa de pontuação
47.90% - 92.30%
Modelo líder
92.30% - Llama 4 Maverick
Pontuações ao longo do tempo
Pontuações individuais do benchmark exibidas por data.
Resultados de modelos
| Organização | Modelos | Data informada | Maior pontuação | Informações | Declarado pelo provedor | Fonte |
|---|---|---|---|---|---|---|
| Llama 4 Maverick | 05 de abr. de 2025 | 92,30% | - | Sim | Fonte | |
| o3 mini | 30 de jan. de 2025 | 92% | - | Sim | Fonte | |
| Llama 2 70B Chat | 20 de jun. de 2023 | 91,10% | inferred family alias from llama-3.3-70b-instruct (score=0.3129; benches=9) | Sim | Fonte | |
| o1 preview | 12 de set. de 2024 | 90,80% | - | Sim | Fonte | |
| Llama 4 Scout | 05 de abr. de 2025 | 90,60% | - | Sim | Fonte | |
| GPT 4o (2024-05-13) | 13 de mai. de 2024 | 90,50% | - | Sim | Fonte | |
| GPT 4 Turbo Preview (1106) | 06 de nov. de 2023 | 88,50% | inferred version-family alias from gpt-4-turbo-2024-04-09 | Sim | Fonte | |
| Gemini 1.5 Pro 001 | 23 de mai. de 2024 | 87,50% | inferred alias from gemini-1.5-pro | Sim | Fonte | |
| Gemini 1.5 Pro Exp (2024-08-01) | 01 de ago. de 2024 | 87,50% | inferred alias from gemini-1.5-pro | Sim | Fonte | |
| Gemini 1.5 Pro Exp (2024-08-27) | 27 de ago. de 2024 | 87,50% | inferred alias from gemini-1.5-pro | Sim | Fonte | |
| Gemini Robotics ER 1.5 Preview | 25 de set. de 2025 | 87,50% | inferred family alias from gemini-1.5-pro (score=0.3717; benches=23) | Sim | Fonte | |
| LearnLM 1.5 Pro Experimental | 19 de nov. de 2024 | 87,50% | inferred family alias from gemini-1.5-pro (score=0.3700; benches=23) | Sim | Fonte | |
| GPT 4o Mini Audio Preview | 17 de dez. de 2024 | 87% | inferred modality/version alias from gpt-4o-mini-2024-07-18 | Sim | Fonte | |
| GPT 4o Mini Realtime Preview | 17 de dez. de 2024 | 87% | inferred modality/version alias from gpt-4o-mini-2024-07-18 | Sim | Fonte | |
| GPT 4o Mini Search Preview | 11 de mar. de 2025 | 87% | inferred modality/version alias from gpt-4o-mini-2024-07-18 | Sim | Fonte | |
| GPT 4o Mini Transcribe (2025-12-15) | 15 de dez. de 2025 | 87% | inferred modality/version alias from gpt-4o-mini-2024-07-18 | Sim | Fonte | |
| GPT 4o Mini Transcribe (2025-03-20) | 20 de mar. de 2025 | 87% | inferred modality/version alias from gpt-4o-mini-2024-07-18 | Sim | Fonte | |
| GPT 4o Mini TTS (2025-12-15) | 15 de dez. de 2025 | 87% | inferred modality/version alias from gpt-4o-mini-2024-07-18 | Sim | Fonte | |
| GPT 4o Mini TTS (2025-03-20) | 20 de mar. de 2025 | 87% | inferred modality/version alias from gpt-4o-mini-2024-07-18 | Sim | Fonte | |
| Llama 3.2 90B Vision Instruct | - | 86,90% | inferred high-confidence family alias from llama-3.2-90b-instruct (score=0.5873; benches=13) | Sim | Fonte | |
| Qwen 3 235B A22B | - | 83,53% | - | Sim | Fonte | |
| Gemini 1.5 Flash 001 | 23 de mai. de 2024 | 82,60% | inferred alias from gemini-1.5-flash | Sim | Fonte | |
| Gemini 1.5 Flash Preview | 14 de mai. de 2024 | 82,60% | inferred alias from gemini-1.5-flash | Sim | Fonte | |
| Granite 4.1 8B | 29 de abr. de 2026 | 82,32% | 8-shot | Sim | Fonte | |
| Phi 1 | - | 80,60% | inferred family alias from phi-4 (score=0.3100; benches=13) | Sim | Fonte |
