WizardLM-2 8x22B
オープンソース開発元 Microsoft · リリース日 2024-04-16
34.7
平均スコア
$0.62/1M
入力料金
$0.62/1M
出力料金
66K tokens (~33 books)
コンテキストウィンドウ
text
タイプ
Tested on 7 benchmarks with 34.7% average. Top scores: IFEval (52.7%), BBH (HuggingFace) (48.6%), Aider — Code Editing (44.4%).
ベンチマークスコア
| ベンチマーク | カテゴリ | スコア | Bar |
|---|---|---|---|
| IFEval | language | 52.7 | |
| BBH (HuggingFace) | general | 48.6 | |
| Aider — Code Editing | coding | 44.4 | |
| MMLU-PRO | knowledge | 40.0 | |
| MATH Level 5 | math | 25.0 | |
| GPQA | knowledge | 17.6 | |
| MUSR | reasoning | 14.5 |