phi-3-medium 14B vs phi-3-mini 3.8B
나란히 비교. 모든 지표. 모든 벤치마크.
| 유형 | phi-3-medium 14B | phi-3-mini 3.8B |
|---|---|---|
| Provider |  Microsoft | Microsoft |
| 평균 점수 | 58.6 | 61.0 |
| 입력 가격 | - | - |
| 출력 가격 | - | - |
| 컨텍스트 윈도우 | - | - |
| 출시일 | 2024-01-01 | 2024-01-01 |
| 오픈소스 | Open Source | Open Source |
벤치마크 점수
8 benchmarks · phi-3-medium 14B: 7, phi-3-mini 3.8B: 1
| 벤치마크 | 카테고리 | phi-3-medium 14B | phi-3-mini 3.8B |
|---|---|---|---|
| ANLI | knowledge | 33.7 | 29.2 |
| ARC AI2 | knowledge | 88.8 | 79.9 |
| BBH | reasoning | 75.2 | 62.3 |
| HellaSwag | knowledge | 76.5 | 68.9 |
| MMLU | knowledge | 70.7 | 58.4 |
| OpenBookQA | knowledge | 83.2 | 84.0 |
| TriviaQA | knowledge | 73.9 | 64.0 |
| Winogrande | knowledge | 63.0 | 41.6 |