phi-3-mini 3.8B
オープンソース開発元 Microsoft · リリース日 2024-01-01
61.0
平均スコア
N/A
入力料金
N/A
出力料金
N/A
コンテキストウィンドウ
text
タイプ
Tested on 8 benchmarks with 61.0% average. Top scores: OpenBookQA (84.0%), ARC AI2 (79.9%), HellaSwag (68.9%).
ベンチマークスコア
| ベンチマーク | カテゴリ | スコア | Bar |
|---|---|---|---|
| OpenBookQA | knowledge | 84.0 | |
| ARC AI2 | knowledge | 79.9 | |
| HellaSwag | knowledge | 68.9 | |
| TriviaQA | knowledge | 64.0 | |
| BBH | reasoning | 62.3 | |
| MMLU | knowledge | 58.4 | |
| Winogrande | knowledge | 41.6 | |
| ANLI | knowledge | 29.2 |
類似モデル
OpenAI
61.2
Alibaba Qwen
60.7
Google DeepMind
60.6
Alibaba
60.6