Beta
Classificação/Mistral Large
Mistral AI

Mistral Large

Código aberto

por Mistral AI · Lançado em 2024-02-26

25.8
pontuação média
$2.00/1M
Preço de entrada
$6.00/1M
Preço de saída
128K tokens (~64 books)
Janela de contexto
text
Tipo

Tested on 4 benchmarks with 25.8% average. Top scores: MMLU (58.4%), MATH level 5 (24.5%), GPQA diamond (18.4%).

Pontuações de benchmark

BenchmarkCategoriaPontuaçãoBar
MMLUknowledge58.4
MATH level 5math24.5
GPQA diamondknowledge18.4
OTIS Mock AIME 2024-2025math1.9

Modelos similares

MetaLlama 3.1 70B Instruct
Meta
26.1
DeepSeekDeepSeek Coder 33B
DeepSeek
25.4
MicrosoftPhi-1.5
Microsoft
27.2
U
Baichuan1-7B
unknown
23.7

Mistral AI Mistral Large Cronologia

Mistral Large
25.8
$2.00/M in128Kctx4 benchmarks
Mistral Large 2407
39.1+13.3
$2.00/M in131Kctx(+3K)6 benchmarks
Mistral Large 2411
23.4-15.7
$2.00/M in131Kctx4 benchmarks
Mistral Large 3 2512
$0.50/M in(-1.50)262Kctx(+131K)