LLaMA-13B vs Llama 2-13B
Lado a lado. Cada métrica. Cada benchmark.
| Tipo | LLaMA-13B | Llama 2-13B |
|---|---|---|
| Provider |  Meta | Meta |
| puntuación promedio | 34.9 | 42.5 |
| Precio de entrada | - | - |
| Precio de salida | - | - |
| Ventana de contexto | - | - |
| Publicado el | 2024-01-01 | 2024-01-01 |
| Código abierto | Open Source | Open Source |
Puntuaciones de benchmark
11 benchmarks · LLaMA-13B: 1, Llama 2-13B: 10
| Benchmark | Categoría | LLaMA-13B | Llama 2-13B |
|---|---|---|---|
| ARC AI2 | knowledge | 36.9 | 47.1 |
| BBH | reasoning | 17.2 | 44.3 |
| GSM8K | math | 20.6 | 36.9 |
| HellaSwag | knowledge | 72.3 | 74.3 |
| LAMBADA | knowledge | 75.2 | 76.5 |
| MMLU | knowledge | 30.3 | 40.8 |
| OpenBookQA | knowledge | 41.9 | 42.7 |
| PIQA | knowledge | 60.2 | 61.6 |
| ScienceQA | knowledge | 24.4 | 41.0 |
| TriviaQA | knowledge | 77.9 | 79.6 |
| Winogrande | knowledge | 46.0 | 45.6 |