Confabulations
AI बेंचमार्क के परिणाम और मॉडल का प्रदर्शन
प्रकार: numerical
दर्ज परिणाम
61
औसत स्कोर
18.79
स्कोर सीमा
10.34 - 40.26
अग्रणी मॉडल (सबसे कम स्कोर)
10.34 - GPT 5
समय के साथ स्कोर
तारीख के अनुसार दिखाए गए अलग-अलग बेंचमार्क स्कोर।
मॉडल परिणाम
| संगठन | मॉडल | रिपोर्ट किया गया | सबसे ऊँचा स्कोर | जानकारी | स्व-रिपोर्ट किया गया | स्रोत |
|---|---|---|---|---|---|---|
| GPT 5 | 07 अग॰ 2025 | 10.34 | Medium reasoning; Confab 10.9%; non-response 9.8% | नहीं | स्रोत | |
| Gemini 2.5 Pro Preview (2025-05-06) | 06 मई 2025 | 10.62 | Confab 5.9%; non-response 15.3% | नहीं | स्रोत | |
| Gemini 2.5 Pro Experimental (2025-03-25) | 25 मार्च 2025 | 10.80 | 2025-03-25; Confab 4.0%; non-response 17.6% | नहीं | स्रोत | |
| GLM 4.5 | 28 जुल॰ 2025 | 11.30 | Confab 7.9%; non-response 14.7% | नहीं | स्रोत | |
| o1 | 17 दिस॰ 2024 | 11.74 | Medium reasoning; Confab 10.9%; non-response 12.6% | नहीं | स्रोत | |
| Qwen 3 30B A3B | - | 12.28 | Confab 12.9%; non-response 11.7% | नहीं | स्रोत | |
| Grok 4 | 10 जुल॰ 2025 | 12.41 | Confab 4.0%; non-response 20.9% | नहीं | स्रोत | |
| Gemini 2.0 Flash Thinking Exp (2025-01-21) | 21 जन॰ 2025 | 12.43 | Confab 14.9%; non-response 10.0% | नहीं | स्रोत | |
| DeepSeek R1 | - | 12.65 | Confab 17.3%; non-response 8.0% | नहीं | स्रोत | |
| o1 preview | 12 सित॰ 2024 | 13.04 | Confab 18.3%; non-response 7.8% | नहीं | स्रोत | |
| GPT 5 Mini | 07 अग॰ 2025 | 13.28 | Medium reasoning; Confab 21.8%; non-response 4.8% | नहीं | स्रोत | |
| Gemini 1.5 Pro 002 | 24 सित॰ 2024 | 13.54 | Confab 16.8%; non-response 10.2% | नहीं | स्रोत | |
| GPT 4.5 Preview | 27 फ़र॰ 2025 | 13.64 | Confab 11.9%; non-response 15.4% | नहीं | स्रोत | |
| Grok 3 Mini Beta | 19 फ़र॰ 2025 | 14.04 | Low reasoning; Confab 10.9%; non-response 17.2% | नहीं | स्रोत | |
| Grok 3 Beta | 19 फ़र॰ 2025 | 14.19 | No reasoning; Confab 17.8%; non-response 10.6% | नहीं | स्रोत | |
| o3 Pro | 10 जून 2025 | 14.22 | Medium reasoning; Confab 23.4%; non-response 5.1% | नहीं | स्रोत | |
| o3 | 16 अप्रैल 2025 | 14.38 | High reasoning; Confab 24.8%; non-response 4.0% | नहीं | स्रोत | |
| DeepSeek R1 (2025-05-28) | 28 मई 2025 | 14.56 | Confab 12.9%; non-response 16.2% | नहीं | स्रोत | |
| Claude Sonnet 4 | 21 मई 2025 | 14.85 | No reasoning; Confab 5.4%; non-response 24.2% | नहीं | स्रोत | |
| GPT 4o (2024-08-06) | 06 अग॰ 2024 | 15.34 | Confab 22.3%; non-response 8.4% | नहीं | स्रोत | |
| QwQ 32B | - | 15.57 | 16K; Confab 25.2%; non-response 5.9% | नहीं | स्रोत | |
| Qwen 3 235B A22B | - | 15.61 | Confab 23.3%; non-response 8.0% | नहीं | स्रोत | |
| GPT OSS 120b | 05 अग॰ 2025 | 15.65 | Medium reasoning; Confab 23.3%; non-response 8.0% | नहीं | स्रोत | |
| o4 Mini | 16 अप्रैल 2025 | 15.79 | High reasoning; Confab 26.7%; non-response 4.8% | नहीं | स्रोत | |
| Ernie 4.5 300B A47B | - | 15.97 | Confab 25.2%; non-response 6.7% | नहीं | स्रोत |
