HumanEval+
نتائج معايير الذكاء الاصطناعي وأداء النماذج
النوع: percentageReasoning
النتائج المسجلة
30
متوسط النقاط
71.24%
نطاق النقاط
25% - 92.90%
النموذج المتصدر
92.90% - Phi 4 Reasoning
النقاط بمرور الوقت
نقاط المعيار الفردية معروضة حسب التاريخ.
نتائج النماذج
| المؤسسة | النماذج | تاريخ الإبلاغ | أعلى نقطة | معلومات | مُبلَّغ عنها ذاتيًا | المصدر |
|---|---|---|---|---|---|---|
| Phi 4 Reasoning | ٣٠ أبريل ٢٠٢٥ | ٩٢٫٩٠٪ | - | نعم | المصدر | |
| Phi 4 Reasoning Plus | ٣٠ أبريل ٢٠٢٥ | ٩٢٫٣٠٪ | - | نعم | المصدر | |
| Granite 3.0 8B Instruct | - | ٨٦٫٠٩٪ | inferred high-confidence family alias from granite-3.3-8b-instruct (score=0.4911; benches=14) | نعم | المصدر | |
| Granite 3.1 8B Instruct | - | ٨٦٫٠٩٪ | inferred high-confidence family alias from granite-3.3-8b-instruct (score=0.4911; benches=14) | نعم | المصدر | |
| Granite 3.2 8B Instruct | - | ٨٦٫٠٩٪ | inferred high-confidence family alias from granite-3.3-8b-instruct (score=0.4911; benches=14) | نعم | المصدر | |
| Granite 3.2 8B Instruct Preview | - | ٨٦٫٠٩٪ | inferred high-confidence family alias from granite-3.3-8b-instruct (score=0.4687; benches=14) | نعم | المصدر | |
| Granite 3.3 2B Instruct | ١٦ أبريل ٢٠٢٥ | ٨٦٫٠٩٪ | inferred family alias from granite-3.3-8b-instruct (score=0.3627; benches=14) | نعم | المصدر | |
| Granite 3.3 8B Instruct | ١٦ أبريل ٢٠٢٥ | ٨٦٫٠٩٪ | - | نعم | المصدر | |
| Granite Guardian 3.0 8B | - | ٨٦٫٠٩٪ | inferred family alias from granite-3.3-8b-instruct (score=0.4062; benches=14) | نعم | المصدر | |
| Granite Guardian 3.1 8B | - | ٨٦٫٠٩٪ | inferred family alias from granite-3.3-8b-instruct (score=0.4062; benches=14) | نعم | المصدر | |
| Granite Guardian 3.3 8B | - | ٨٦٫٠٩٪ | inferred high-confidence family alias from granite-3.3-8b-instruct (score=0.5071; benches=14) | نعم | المصدر | |
| Granite Speech 3.2 8B | - | ٨٦٫٠٩٪ | inferred family alias from granite-3.3-8b-instruct (score=0.4062; benches=14) | نعم | المصدر | |
| Granite Speech 3.3 8B | - | ٨٦٫٠٩٪ | inferred high-confidence family alias from granite-3.3-8b-instruct (score=0.5071; benches=14) | نعم | المصدر | |
| Granite 4.1 30B | ٢٩ أبريل ٢٠٢٦ | ٨٥٫٣٧٪ | pass@1 | نعم | المصدر | |
| Phi 1 | - | ٨٢٫٨٠٪ | inferred family alias from phi-4 (score=0.3100; benches=13) | نعم | المصدر | |
| Phi 2 | - | ٨٢٫٨٠٪ | inferred family alias from phi-4 (score=0.3100; benches=13) | نعم | المصدر | |
| Phi 4 | ١٢ ديسمبر ٢٠٢٤ | ٨٢٫٨٠٪ | - | نعم | المصدر | |
| Granite 4.1 8B | ٢٩ أبريل ٢٠٢٦ | ٧٩٫٨٨٪ | pass@1 | نعم | المصدر | |
| Granite 4.0 Micro | ٠٢ أكتوبر ٢٠٢٥ | ٧٨٫٣٠٪ | inferred high-confidence family alias from granite-4.0-tiny-preview (score=0.4700; benches=12) | نعم | المصدر | |
| Granite 4.0 Small | ٠٢ أكتوبر ٢٠٢٥ | ٧٨٫٣٠٪ | inferred high-confidence family alias from granite-4.0-tiny-preview (score=0.4700; benches=12) | نعم | المصدر | |
| Granite 4.0 Tiny | ٠٢ أكتوبر ٢٠٢٥ | ٧٨٫٣٠٪ | inferred alias from granite-4.0-tiny-preview | نعم | المصدر | |
| Granite 4.0 Tiny Preview | ٠٢ مايو ٢٠٢٥ | ٧٨٫٣٠٪ | - | نعم | المصدر | |
| Granite 4.1 3B | ٢٩ أبريل ٢٠٢٦ | ٧٦٫٨٣٪ | pass@1 | نعم | المصدر | |
| Qwen 14B | - | ٥١٫٢٠٪ | inferred family alias from qwen-2.5-14b-instruct (score=0.3060; benches=16) | نعم | المصدر | |
| Ernie 4.5 21B A3B | - | ٢٥٪ | inferred version-family alias from ernie-4.5 | نعم | المصدر |
