Mixtral 8x22B Instruct
Código abertopor Mistral AI · Lançado em 2024-04-17
23.5
pontuação média
$2.00/1M
Preço de entrada
$6.00/1M
Preço de saída
66K tokens (~33 books)
Janela de contexto
text
Tipo
Tested on 5 benchmarks with 23.5% average. Top scores: MMLU (70.4%), MATH level 5 (24.2%), GPQA diamond (12.1%).
Pontuações de benchmark
| Benchmark | Categoria | Pontuação | Bar |
|---|---|---|---|
| MMLU | knowledge | 70.4 | |
| MATH level 5 | math | 24.2 | |
| GPQA diamond | knowledge | 12.1 | |
| Cybench | coding | 7.5 | |
| WeirdML | coding | 3.2 |