OpenBookQA
AIベンチマーク結果とモデルの性能
種類: percentageGeneral
記録された結果
5
平均スコア
77.56%
スコアの範囲
60.60% - 89.60%
最上位モデル
89.60% - Phi 3.5 MoE instruct
スコアの推移
日付ごとの個別ベンチマークスコアです。
モデル結果
| 組織 | モデル | 報告日 | 最高スコア | 情報 | 自己申告 | 出典 |
|---|---|---|---|---|---|---|
| Phi 3.5 MoE instruct | 2024年8月23日 | 89.60% | - | はい | 出典 | |
| Phi 3 Mini 128K Instruct | - | 79.20% | inferred family alias from phi-3.5-mini-instruct (score=0.3533; benches=31) | はい | 出典 | |
| Phi 3.5 mini instruct | 2024年8月23日 | 79.20% | - | はい | 出典 | |
| Phi 4 Mini | 2025年2月01日 | 79.20% | - | はい | 出典 | |
| Mistral Nemo 12B | 2024年7月18日 | 60.60% | inferred family alias from mistral-nemo-instruct-2407 (score=0.3250; benches=8) | はい | 出典 |