Mixtral 8x22B Instruct
Code source ouvertpar Mistral AI · Sorti le 2024-04-17
23.5
score moyen
$2.00/1M
Prix d'entrée
$6.00/1M
Prix de sortie
66K tokens (~33 books)
Fenêtre de contexte
text
Type
Tested on 5 benchmarks with 23.5% average. Top scores: MMLU (70.4%), MATH level 5 (24.2%), GPQA diamond (12.1%).
Scores de benchmark
| Benchmark | Catégorie | Score | Bar |
|---|---|---|---|
| MMLU | knowledge | 70.4 | |
| MATH level 5 | math | 24.2 | |
| GPQA diamond | knowledge | 12.1 | |
| Cybench | coding | 7.5 | |
| WeirdML | coding | 3.2 |