Mixtral 8x22B Instruct
オープンソース開発元 Mistral AI · リリース日 2024-04-17
23.5
平均スコア
$2.00/1M
入力料金
$6.00/1M
出力料金
66K tokens (~33 books)
コンテキストウィンドウ
text
タイプ
Tested on 5 benchmarks with 23.5% average. Top scores: MMLU (70.4%), MATH level 5 (24.2%), GPQA diamond (12.1%).
ベンチマークスコア
| ベンチマーク | カテゴリ | スコア | Bar |
|---|---|---|---|
| MMLU | knowledge | 70.4 | |
| MATH level 5 | math | 24.2 | |
| GPQA diamond | knowledge | 12.1 | |
| Cybench | coding | 7.5 | |
| WeirdML | coding | 3.2 |