Beta
Clasificaci贸n/Llama 3.1 70B Instruct
Meta

Llama 3.1 70B Instruct

C贸digo abierto

por Meta 路 Publicado el 2024-07-23

26.1
puntuaci贸n promedio
$0.40/1M
Precio de entrada
$0.40/1M
Precio de salida
131K tokens (~66 books)
Ventana de contexto
text
Tipo

Tested on 7 benchmarks with 26.1% average. Top scores: MMLU (73.5%), MATH level 5 (36.7%), Balrog (27.9%).

Puntuaciones de benchmark

BenchmarkCategor铆aPuntuaci贸nBar
MMLUknowledge73.5
MATH level 5math36.7
Balrogknowledge27.9
GPQA diamondknowledge25.6
WeirdMLcoding9.0
The Agent Companyagentic6.9
OTIS Mock AIME 2024-2025math3.5

Modelos similares

Mistral AIMistral Large
Mistral AI
25.8
DeepSeekDeepSeek Coder 33B
DeepSeek
25.4
MicrosoftPhi-1.5
Microsoft
27.2
MetaLlama 4 Maverick
Meta
28.0

Meta Llama 3.1 Cronolog铆a

Llama 3.1 70B Instruct
26.1
$0.40/M in131Kctx7 benchmarks
Llama 3.1 8B Instruct
28.7+2.6
$0.02/M in(-0.38)16Kctx(-115K)8 benchmarks
Llama 3.1-405B
49.3+20.6
N/AN/Actx15 benchmarks