Beta
Classificação/Llama 3.3 70B Instruct
Meta

Llama 3.3 70B Instruct

Código aberto

por Meta · Lançado em 2024-12-06

29.1
pontuação média
$0.10/1M
Preço de entrada
$0.32/1M
Preço de saída
131K tokens (~66 books)
Janela de contexto
text
Tipo

Tested on 8 benchmarks with 29.1% average. Top scores: MMLU (81.7%), MATH level 5 (41.6%), Fiction.LiveBench (33.3%).

Pontuações de benchmark

BenchmarkCategoriaPontuaçãoBar
MMLUknowledge81.7
MATH level 5math41.6
Fiction.LiveBenchknowledge33.3
GPQA diamondknowledge29.9
Balrogknowledge23.0
WeirdMLcoding14.4
OTIS Mock AIME 2024-2025math5.0
SimpleBenchreasoning3.9

Modelos similares

MetaLlama 3.3 70B Instruct (free)
Meta
29.1
U
Dolly 2.0-12b
unknown
29.2
AnthropicClaude 3.5 Sonnet
Anthropic
28.8
MetaLlama 3.1 8B Instruct
Meta
28.7

Meta Llama 3.3 Cronologia

Llama 3.3 70B Instruct
29.1
$0.10/M in131Kctx8 benchmarks
Llama 3.3 70B Instruct (free)
29.1
$0.00/M in(-0.10)66Kctx(-66K)8 benchmarks