phi-3-small 7.4B vs Llama 3 8B Instruct
Lado a lado. Cada métrica. Cada benchmark.
| Tipo | phi-3-small 7.4B | Llama 3 8B Instruct |
|---|---|---|
| Provider |  Microsoft |  Meta |
| pontuação média | 67.4 | 30.8 |
| Preço de entrada | - | $0.03 |
| Preço de saída | - | $0.04 |
| Janela de contexto | - | 8K tokens (~4 books) |
| Lançado em | 2024-01-01 | 2024-04-18 |
| Código aberto | Open Source | Open Source |
Pontuações de benchmark
6 benchmarks · phi-3-small 7.4B: 5, Llama 3 8B Instruct: 1
| Benchmark | Categoria | phi-3-small 7.4B | Llama 3 8B Instruct |
|---|---|---|---|
| ANLI | knowledge | 37.1 | 36.0 |
| ARC AI2 | knowledge | 87.6 | 77.1 |
| MMLU | knowledge | 67.6 | 58.4 |
| OpenBookQA | knowledge | 84.0 | 76.8 |
| TriviaQA | knowledge | 58.1 | 67.7 |
| Winogrande | knowledge | 63.0 | 51.4 |