SimpleQA
Resultados de benchmarks de IA e desempenho dos modelos
Tipo: percentage
Resultados registrados
87
Pontuação média
36.60%
Faixa de pontuação
1.80% - 97.10%
Modelo líder
97.10% - DeepSeek OCR 2
Pontuações ao longo do tempo
Pontuações individuais do benchmark exibidas por data.
Resultados de modelos
| Organização | Modelos | Data informada | Maior pontuação | Informações | Declarado pelo provedor | Fonte |
|---|---|---|---|---|---|---|
| DeepSeek OCR 2 | - | 97,10% | inferred family alias from deepseek-v3.2-exp (score=0.3809; benches=14) | Sim | Fonte | |
| DeepSeek V3.2 Exp | 29 de set. de 2025 | 97,10% | - | Sim | Fonte | |
| DeepSeek V3.1 | 21 de ago. de 2025 | 93,40% | Search agent evaluation | Sim | Fonte | |
| DeepSeek V3.1 Terminus | 22 de set. de 2025 | 93,40% | inferred alias from deepseek-v3.1 | Sim | Fonte | |
| Ernie 5.0 | 22 de jan. de 2026 | 75% | - | Sim | Fonte | |
| Ernie 5.0 0110 | - | 75% | inferred version-family alias from ernie-5.0 | Sim | Fonte | |
| Ernie 5.0 Preview 1203 | - | 75% | inferred version-family alias from ernie-5.0 | Sim | Fonte | |
| Ernie 5.0 Preview 1220 | - | 75% | inferred version-family alias from ernie-5.0 | Sim | Fonte | |
| Gemini 3 Pro Image Preview (Nano Banana Pro) | 20 de nov. de 2025 | 72,10% | inferred modality/version alias from gemini-3-pro-preview | Sim | Fonte | |
| Gemini 3 Pro Preview | 18 de nov. de 2025 | 72,10% | - | Sim | Fonte | |
| Gemini 3 Flash Preview | 17 de dez. de 2025 | 68,70% | - | Sim | Fonte | |
| GPT 4.5 Preview | 27 de fev. de 2025 | 62,50% | - | Sim | Fonte | |
| Qwen 3 VL 32B Thinking | - | 55,40% | - | Sim | - | |
| Qwen 3 A235 A22B Instruct 2507 | - | 54,30% | - | Sim | Fonte | |
| Gemini 2.5 Pro Preview (2025-06-05) | 05 de jun. de 2025 | 54% | - | Sim | Fonte | |
| Gemini 2.5 Pro Preview TTS (2025-05-20) | 20 de mai. de 2025 | 54% | inferred family alias from gemini-2.5-pro-preview-06-05 (score=0.4243; benches=13) | Sim | Fonte | |
| Qwen 3 VL 235B A22B Instruct | - | 51,90% | - | Sim | - | |
| Gemini 2.5 Computer Use Preview | 07 de out. de 2025 | 50,80% | inferred family alias from gemini-2.5-pro (score=0.3960; benches=16) | Sim | Fonte | |
| Gemini 2.5 Pro Experimental (2025-03-25) | 25 de mar. de 2025 | 50,80% | inferred alias from gemini-2.5-pro | Sim | Fonte | |
| Gemini 2.5 Pro Preview (2025-05-06) | 06 de mai. de 2025 | 50,80% | - | Sim | Fonte | |
| Gemini 2.5 Pro Preview TTS (2025-12-10) | 10 de dez. de 2025 | 50,80% | inferred modality/version alias from gemini-2.5-pro | Sim | Fonte | |
| Gemini Embedding 2 Preview | 10 de mar. de 2026 | 50,80% | manual fallback alias from gemini-2.5-pro | Sim | Fonte | |
| Qwen 3 8B | - | 49,60% | inferred high-confidence family alias from qwen3-vl-8b-thinking (score=0.4600; benches=50) | Sim | - | |
| Qwen 3 Guard Stream 8B | - | 49,60% | inferred family alias from qwen3-vl-8b-thinking (score=0.3371; benches=50) | Sim | - | |
| Qwen 3 VL 8B Thinking | - | 49,60% | - | Sim | - |
