MBPP
نتائج معايير الذكاء الاصطناعي وأداء النماذج
النوع: numericalGeneral
النتائج المسجلة
34
متوسط النقاط
7.88
نطاق النقاط
0.67 - 87.30
النموذج المتصدر
87.30 - Granite 4.1 8B
النقاط بمرور الوقت
نقاط المعيار الفردية معروضة حسب التاريخ.
نتائج النماذج
| المؤسسة | النماذج | تاريخ الإبلاغ | أعلى نقطة | معلومات | مُبلَّغ عنها ذاتيًا | المصدر |
|---|---|---|---|---|---|---|
| Granite 4.1 8B | ٢٩ أبريل ٢٠٢٦ | ٨٧٫٣٠ | pass@1 | نعم | المصدر | |
| Granite 4.1 30B | ٢٩ أبريل ٢٠٢٦ | ٨٥٫٤٥ | pass@1 | نعم | المصدر | |
| Granite 4.1 3B | ٢٩ أبريل ٢٠٢٦ | ٧١٫١٦ | pass@1 | نعم | المصدر | |
| Llama 3.3 Nemotron Super 49B v1 | ١٨ مارس ٢٠٢٥ | ٠٫٩١ | - | نعم | المصدر | |
| Llama 3.3 Nemotron Super 49B V1.5 | - | ٠٫٩١ | inferred version-family alias from llama-3.3-nemotron-super-49b-v1 | نعم | المصدر | |
| Qwen 72B | - | ٠٫٨٨ | inferred family alias from qwen-2.5-72b-instruct (score=0.3060; benches=14) | نعم | المصدر | |
| Llama 3.1 Nemotron Nano 4B V1.1 | - | ٠٫٨٥ | inferred high-confidence family alias from llama-3.1-nemotron-nano-8b-v1 (score=0.5523; benches=7) | نعم | المصدر | |
| Llama 3.1 Nemotron Nano 8B V1 | ١٨ مارس ٢٠٢٥ | ٠٫٨٥ | - | نعم | المصدر | |
| Qwen 2.5 Coder 32B Instruct | - | ٠٫٨٤ | inferred high-confidence family alias from qwen2.5-vl-32b (score=0.4641; benches=28) | نعم | المصدر | |
| Qwen 2.5 VL 32B Instruct | ٢٤ مارس ٢٠٢٥ | ٠٫٨٤ | - | نعم | المصدر | |
| Qwen 2.5 VL 3B Instruct | - | ٠٫٨٤ | inferred high-confidence family alias from qwen2.5-vl-32b (score=0.4914; benches=28) | نعم | المصدر | |
| Qwen 14B | - | ٠٫٨٢ | inferred family alias from qwen-2.5-14b-instruct (score=0.3060; benches=16) | نعم | المصدر | |
| Qwen 3 235B A22B | - | ٠٫٨١ | - | نعم | المصدر | |
| Phi 3.5 MoE instruct | ٢٣ أغسطس ٢٠٢٤ | ٠٫٨١ | - | نعم | المصدر | |
| Qwen 2 Math 72B | - | ٠٫٨٠ | inferred high-confidence family alias from qwen2-72b-instruct (score=0.4667; benches=17) | نعم | المصدر | |
| Qwen 2 Math RM 72B | - | ٠٫٨٠ | inferred family alias from qwen2-72b-instruct (score=0.3917; benches=17) | نعم | المصدر | |
| Qwen 7B | - | ٠٫٧٩ | inferred family alias from qwen-2.5-7b-instruct (score=0.3083; benches=14) | نعم | المصدر | |
| Codestral (2025-07-30) | ٣٠ يوليو ٢٠٢٥ | ٠٫٧٨ | inferred version-family alias from codestral-22b | نعم | المصدر | |
| Codestral (2024-05-29) | ٢٩ مايو ٢٠٢٤ | ٠٫٧٨ | inferred modality/version alias from codestral-22b | نعم | المصدر | |
| Codestral (2025-01-13) | ١٣ يناير ٢٠٢٥ | ٠٫٧٨ | inferred modality/version alias from codestral-22b | نعم | المصدر | |
| Llama 4 Maverick | ٠٥ أبريل ٢٠٢٥ | ٠٫٧٨ | - | نعم | المصدر | |
| Gemini Diffusion | ٢٠ مايو ٢٠٢٥ | ٠٫٧٦ | - | نعم | المصدر | |
| Qwen 2.5 Coder 3B | - | ٠٫٧٣ | inferred family alias from qwen2.5-omni-7b (score=0.3000; benches=45) | نعم | المصدر | |
| Qwen 2.5 Coder 7B | - | ٠٫٧٣ | inferred high-confidence family alias from qwen2.5-omni-7b (score=0.4700; benches=45) | نعم | المصدر | |
| Qwen 2.5 Math 7B | - | ٠٫٧٣ | inferred high-confidence family alias from qwen2.5-omni-7b (score=0.4767; benches=45) | نعم | المصدر |
