Beta
Clasificaci贸n/Llama 3 70B Instruct
Meta

Llama 3 70B Instruct

C贸digo abierto

por MetaPublicado el 2024-04-18

31.7
puntuaci贸n promedio
$0.51/1M
Precio de entrada
$0.74/1M
Precio de salida
8K tokens (~4 books)
Ventana de contexto
text
Tipo

Tested on 7 benchmarks with 31.7% average. Top scores: MMLU (72.4%), Winogrande (67.0%), OpenBookQA (30.1%).

Puntuaciones de benchmark

BenchmarkCategor铆aPuntuaci贸nBar
MMLUknowledge72.4
Winograndeknowledge67.0
OpenBookQAknowledge30.1
MATH level 5math22.6
GPQA diamondknowledge20.8
Cybenchcoding5.0
OTIS Mock AIME 2024-2025math4.2

Modelos similares