Mistral Small 3.1 24B
オープンソース開発元 Mistral AI · リリース日 2025-03-17
55.8
平均スコア
$0.35/1M
入力料金
$0.56/1M
出力料金
128K tokens (~64 books)
コンテキストウィンドウ
multimodal
タイプ
Tested on 5 benchmarks with 55.8% average. Top scores: HELM — WildBench (78.8%), HELM — IFEval (75.0%), HELM — MMLU-Pro (61.0%).
ベンチマークスコア
| ベンチマーク | カテゴリ | スコア | Bar |
|---|---|---|---|
| HELM — WildBench | reasoning | 78.8 | |
| HELM — IFEval | language | 75.0 | |
| HELM — MMLU-Pro | knowledge | 61.0 | |
| HELM — GPQA | knowledge | 39.2 | |
| HELM — Omni-MATH | math | 24.8 |
類似モデル
Alibaba Qwen
55.9
OpenAI
56.0
DeepSeek
56.0
OpenAI
56.2