MMMU Pro
AIベンチマーク結果とモデルの性能
種類: percentage
記録された結果
132
平均スコア
66.27%
スコアの範囲
33% - 86.70%
最上位モデル
86.70% - GPT-6 Astra
スコアの推移
日付ごとの個別ベンチマークスコアです。
モデル結果
| 組織 | モデル | 報告日 | 最高スコア | 情報 | 自己申告 | 出典 |
|---|---|---|---|---|---|---|
| GPT-6 Astra | 2026年9月03日 | 86.70% | MMMU-Pro (Vision); reasoning effort max; estimated cost per task $0.065; OpenAI-reported in the GPT-6.1 Terra launch post | はい | 出典 | |
| GPT-6.1 Sol | 2026年9月29日 | 86.30% | MMMU-Pro (Vision); reasoning effort max; estimated cost per task $0.013; OpenAI-reported in the GPT-6.1 Terra launch post | はい | 出典 | |
| GPT-6.1 Terra | 2026年10月26日 | 85.50% | MMMU-Pro (Vision); reasoning effort max; estimated cost per task $0.012; OpenAI-reported in the GPT-6.1 Terra launch post | はい | 出典 | |
| GPT 5.5 | 2026年4月23日 | 83.20% | With tools | はい | 出典 | |
| GPT 5.4 | 2026年3月05日 | 82.10% | With tools | はい | 出典 | |
| GPT 5.6 Terra | 2026年7月09日 | 81.70% | MMMU-Pro (Vision); reasoning effort max; estimated cost per task $0.079; OpenAI-reported in the GPT-6.1 Terra launch post | はい | 出典 | |
| Kimi K3 | 2026年7月16日 | 81.60% | Average of three runs; official protocol preserves input order and prepends images to text input. | はい | 出典 | |
| Gemini 3 Flash Preview | 2025年12月17日 | 81.20% | - | はい | 出典 | |
| GPT 5 Pro | 2025年8月07日 | 81.20% | inferred family alias from gpt-5.4 (score=0.4083; benches=19) | はい | 出典 | |
| GPT 5 Search API | 2025年10月14日 | 81.20% | inferred family alias from gpt-5.4 (score=0.3050; benches=19) | はい | 出典 | |
| Gemini 3 Pro Image Preview (Nano Banana Pro) | 2025年11月20日 | 81% | inferred modality/version alias from gemini-3-pro-preview | はい | 出典 | |
| Gemini 3 Pro Preview | 2025年11月18日 | 81% | - | はい | 出典 | |
| Gemini 3.1 Pro Preview | 2026年2月19日 | 80.50% | Search + Python + Browse | はい | - | |
| Muse Spark | 2026年4月08日 | 80.40% | Multimodal understanding | はい | 出典 | |
| GPT-6 Luna | 2026年9月22日 | 79.90% | MMMU-Pro (Vision); reasoning effort max; estimated cost per task $0.0021; OpenAI-reported in the GPT-6.1 Terra launch post | はい | 出典 | |
| GPT 5.2 Chat | 2025年12月11日 | 79.50% | inferred alias from gpt-5.2-2025-12-11 | はい | 出典 | |
| Qwen 3.5 397B A17B | 2026年2月16日 | 79% | - | はい | 出典 | |
| Qwen 3.6 Plus | 2026年4月01日 | 78.80% | - | はい | 出典 | |
| Kimi K2.5 | 2026年1月27日 | 78.50% | - | はい | 出典 | |
| GPT 5 | 2025年8月07日 | 78.40% | With Thinking, Pass @ 1 | はい | 出典 | |
| Seed 2.0 Pro | 2026年2月14日 | 78.20% | Seed2 official benchmark table | MMMU-Pro | はい | 出典 | |
| GPT 5.4 Mini | 2026年3月17日 | 78% | With Python | はい | 出典 | |
| MiMo V2.5 | 2026年4月23日 | 77.90% | Image understanding benchmark from official MiMo-V2.5 model card image | はい | 出典 | |
| Claude Opus 4.6 | 2026年2月05日 | 77.30% | With tools | はい | 出典 | |
| Gemma 4 31B | 2026年4月02日 | 76.90% | - | はい | 出典 |