COLLIE
AIベンチマーク結果とモデルの性能
種類: percentage
記録された結果
23
平均スコア
74.41%
スコアの範囲
61% - 99%
最上位モデル
99% - GPT 5
スコアの推移
日付ごとの個別ベンチマークスコアです。
モデル結果
| 組織 | モデル | 報告日 | 最高スコア | 情報 | 自己申告 | 出典 |
|---|---|---|---|---|---|---|
| GPT 5 | 2025年8月07日 | 99% | With Thinking, Pass @ 1 | はい | 出典 | |
| o3 mini | 2025年1月30日 | 98.70% | - | はい | 出典 | |
| GPT 5 Mini | 2025年8月07日 | 98.50% | High Reasoning Effort | はい | 出典 | |
| GPT 5 Nano | 2025年8月07日 | 96.90% | High Reasoning Effort | はい | 出典 | |
| Mistral Medium 3.5 | 2026年4月29日 | 95.80% | - | はい | 出典 | |
| Seed 2.0 Lite | 2026年2月14日 | 94% | Seed2 official benchmark table | COLLIE | はい | 出典 | |
| Seed 2.0 Pro | 2026年2月14日 | 93.90% | Seed2 official benchmark table | COLLIE | はい | 出典 | |
| Seed 2.0 Mini | 2026年2月14日 | 91.20% | Seed2 official benchmark table | COLLIE | はい | 出典 | |
| GPT 4.5 Preview | 2025年2月27日 | 72.30% | - | はい | 出典 | |
| Mistral Small 1.0 | 2024年2月26日 | 62.90% | inferred family alias from mistral-small-latest (score=0.3650; benches=9) | はい | 出典 | |
| Mistral Small 2.0 | 2024年9月17日 | 62.90% | inferred family alias from mistral-small-latest (score=0.3650; benches=9) | はい | 出典 | |
| Mistral Small 4 | 2026年3月16日 | 62.90% | - | はい | 出典 | |
| Mistral Small Creative | 2025年12月16日 | 62.90% | inferred family alias from mistral-small-latest (score=0.4273; benches=9) | はい | 出典 | |
| GPT 4o (2024-08-06) | 2024年8月06日 | 61% | - | はい | 出典 | |
| GPT 4o Audio Preview (2025-06-03) | 2025年6月03日 | 61% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 | |
| GPT 4o Audio Preview (2024-10-01) | 2024年10月01日 | 61% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 | |
| GPT 4o Audio Preview (2024-12-17) | 2024年12月17日 | 61% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 | |
| GPT 4o Realtime Preview (2025-06-03) | 2025年6月03日 | 61% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 | |
| GPT 4o Realtime Preview (2024-10-01) | 2024年10月01日 | 61% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 | |
| GPT 4o Search Preview | 2025年3月11日 | 61% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 | |
| GPT 4o Transcribe | 2025年3月20日 | 61% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 | |
| GPT 4o Transcribe Diarize | 2025年10月15日 | 61% | inferred modality/version alias from gpt-4o-2024-08-06 | はい | 出典 |
