phi-3-small 7.4B vs Llama 3 8B Instruct
Côte à côte. Chaque métrique. Chaque benchmark.
| Type | phi-3-small 7.4B | Llama 3 8B Instruct |
|---|---|---|
| Provider |  Microsoft |  Meta |
| score moyen | 67.4 | 30.8 |
| Prix d'entrée | - | $0.03 |
| Prix de sortie | - | $0.04 |
| Fenêtre de contexte | - | 8K tokens (~4 books) |
| Sorti le | 2024-01-01 | 2024-04-18 |
| Code source ouvert | Open Source | Open Source |
Scores de benchmark
6 benchmarks · phi-3-small 7.4B: 5, Llama 3 8B Instruct: 1
| Benchmark | Catégorie | phi-3-small 7.4B | Llama 3 8B Instruct |
|---|---|---|---|
| ANLI | knowledge | 37.1 | 36.0 |
| ARC AI2 | knowledge | 87.6 | 77.1 |
| MMLU | knowledge | 67.6 | 58.4 |
| OpenBookQA | knowledge | 84.0 | 76.8 |
| TriviaQA | knowledge | 58.1 | 67.7 |
| Winogrande | knowledge | 63.0 | 51.4 |