Magnum v4 72B
オープンソース開発元 anthracite-org · リリース日 2024-10-22
27.9
平均スコア
$3.00/1M
入力料金
$5.00/1M
出力料金
16K tokens (~8 books)
コンテキストウィンドウ
text
タイプ
Tested on 6 benchmarks with 27.9% average. Top scores: IFEval (56.3%), BBH (HuggingFace) (35.5%), MMLU-PRO (31.4%).
ベンチマークスコア
| ベンチマーク | カテゴリ | スコア | Bar |
|---|---|---|---|
| IFEval | language | 56.3 | |
| BBH (HuggingFace) | general | 35.5 | |
| MMLU-PRO | knowledge | 31.4 | |
| MATH Level 5 | math | 20.0 | |
| MUSR | reasoning | 13.4 | |
| GPQA | knowledge | 10.4 |