LLaMA-13B vs Llama 2-13B
Côte à côte. Chaque métrique. Chaque benchmark.
| Type | LLaMA-13B | Llama 2-13B |
|---|---|---|
| Provider |  Meta | Meta |
| score moyen | 34.9 | 42.5 |
| Prix d'entrée | - | - |
| Prix de sortie | - | - |
| Fenêtre de contexte | - | - |
| Sorti le | 2024-01-01 | 2024-01-01 |
| Code source ouvert | Open Source | Open Source |
Scores de benchmark
11 benchmarks · LLaMA-13B: 1, Llama 2-13B: 10
| Benchmark | Catégorie | LLaMA-13B | Llama 2-13B |
|---|---|---|---|
| ARC AI2 | knowledge | 36.9 | 47.1 |
| BBH | reasoning | 17.2 | 44.3 |
| GSM8K | math | 20.6 | 36.9 |
| HellaSwag | knowledge | 72.3 | 74.3 |
| LAMBADA | knowledge | 75.2 | 76.5 |
| MMLU | knowledge | 30.3 | 40.8 |
| OpenBookQA | knowledge | 41.9 | 42.7 |
| PIQA | knowledge | 60.2 | 61.6 |
| ScienceQA | knowledge | 24.4 | 41.0 |
| TriviaQA | knowledge | 77.9 | 79.6 |
| Winogrande | knowledge | 46.0 | 45.6 |