CruxEval-O
Resultados de benchmarks de IA e desempenho dos modelos
Tipo: numericalReasoning
Resultados registrados
6
Pontuação média
24.28
Faixa de pontuação
0.51 - 55.75
Modelo líder
55.75 - Granite 4.1 30B
Pontuações ao longo do tempo
Pontuações individuais do benchmark exibidas por data.
Resultados de modelos
| Organização | Modelos | Data informada | Maior pontuação | Informações | Declarado pelo provedor | Fonte |
|---|---|---|---|---|---|---|
| Granite 4.1 30B | 29 de abr. de 2026 | 55,75 | pass@1 | Sim | Fonte | |
| Granite 4.1 8B | 29 de abr. de 2026 | 47,63 | pass@1 | Sim | Fonte | |
| Granite 4.1 3B | 29 de abr. de 2026 | 40,75 | pass@1 | Sim | Fonte | |
| Codestral (2025-07-30) | 30 de jul. de 2025 | 0,51 | inferred version-family alias from codestral-22b | Sim | Fonte | |
| Codestral (2024-05-29) | 29 de mai. de 2024 | 0,51 | inferred modality/version alias from codestral-22b | Sim | Fonte | |
| Codestral (2025-01-13) | 13 de jan. de 2025 | 0,51 | inferred modality/version alias from codestral-22b | Sim | Fonte |